日志服务：使用CloudLens for SLS监控Project资源配额

参数项

赋值

规则名称

Logstore数水位监控

检查频率

固定间隔，15分钟

查询统计

• 类型：指标库

• 授权方式：默认

• 指标库：internal-monitor-metric

• 查询区间：15分钟（相对）

• 查询语句：

  重要

  查询SQL默认返回100条数据，若在SQL结尾添加limit 1000，代表可返回1000条查询结果。

  * |  select Project, region, round(count_logstore/quota_logstore * 100, 3)  as logstore_ratio from 
  (SELECT A.id as Project , A.region as region, COALESCE(SUM(B.count_logstore), 0)  AS count_logstore , cast(json_extract(A.quota, '$.logstore') as double)  as quota_logstore
  FROM  "resource.sls.cmdb.project" as A
  LEFT JOIN (
    SELECT project, COUNT(*) AS count_logstore
    FROM "resource.sls.cmdb.logstore" as B
    GROUP BY project
  ) AS B ON A.id = B.project 
  group by A.id, A.quota, A.region) where  quota_logstore is not null   order by logstore_ratio desc limit 1000

分组评估

标签自动

触发条件

说明

• 当有Project的LogStore数超过额度的90%时告警级别为严重。

• 当有Project的LogStore数超过额度的80%时告警级别为中。

• 当有数据匹配logstore_ratio > 90时，严重度：严重。

• 当有数据匹配logstore_ratio > 80时，严重度：中。

输出目标

SLS通知

告警策略

普通模式

行动策略

按需选择或单击新增创建行动策略，具体操作，请参见创建行动策略。

参数项

赋值

规则名称

Logstore数额度超限

检查频率

固定间隔，15分钟

查询统计

• 类型：日志库

• 授权方式：默认

• 日志库：internal-error_log

• 查询区间：15分钟（相对）

• 查询语句：

  重要

  查询SQL默认返回100条数据，若在SQL结尾添加limit 1000，代表可返回1000条查询结果。

  * and (ErrorCode: ExceedQuota or ErrorCode: QuotaExceed or ErrorCode: ProjectQuotaExceed or ErrorCode:WriteQuotaExceed)| SELECT Project, 
  COUNT(1) AS count where ErrorMsg like '%logstore count %' GROUP BY Project ORDER BY count DESC LIMIT 1000

分组评估

不分组

触发条件

说明

• 当有Project的Logstore发生超限10次错误告警级别为严重。

• 当有Project的Logstore发生超限1次错误时告警级别为中。

• 当有数据匹配count > 10时，严重度：严重。

• 当有数据匹配count > 1时，严重度：中。

输出目标

SLS通知

告警策略

普通模式

行动策略

按需选择或单击新增创建行动策略，具体操作，请参见创建行动策略。

参数项

赋值

规则名称

机器组水位监控

检查频率

固定间隔，15分钟

查询统计

• 类型：指标库

• 授权方式：默认

• 指标库：internal-monitor-metric

• 查询区间：15分钟（相对）

• 查询语句：

  重要

  查询SQL默认返回100条数据，若在SQL结尾添加limit 1000，代表可返回1000条查询结果。

  * |  select Project, region, round(count_machine_group/quota_machine_group * 100, 3)  as machine_group_ratio from 
  (SELECT A.id as Project , A.region as region, COALESCE(SUM(B.count_machine_group), 0)  AS count_machine_group , cast(json_extract(A.quota, '$.machine_group') as double)  as quota_machine_group
  FROM  "resource.sls.cmdb.project" as A
  LEFT JOIN (
    SELECT project, COUNT(*) AS count_machine_group
    FROM "resource.sls.cmdb.machine_group" as B
    GROUP BY project
  ) AS B ON A.id = B.project 
  group by A.id, A.quota, A.region) where  quota_machine_group is not null   order by machine_group_ratio desc limit 1000

分组评估

标签自动

触发条件

说明

• 当有Project的机器组超过额度的90%时告警级别为严重。

• 当有Project的机器组超过额度的80%时告警级别为中。

• 当有数据匹配machine_group_ratio > 90时，严重度：严重。

• 当有数据匹配machine_group_ratio > 80时，严重度：中。

输出目标

SLS通知

告警策略

普通模式

行动策略

按需选择或单击新增创建行动策略，具体操作，请参见创建行动策略。

参数项

赋值

规则名称

Logstore数额度超限

检查频率

固定间隔，15分钟

查询统计

• 类型：日志库

• 授权方式：默认

• 日志库：internal-error_log

• 查询区间：15分钟（相对）

• 查询语句：

  重要

  查询SQL默认返回100条数据，若在SQL结尾添加limit 1000，代表可返回1000条查询结果。

  * and (ErrorCode: ExceedQuota or ErrorCode: QuotaExceed or ErrorCode: ProjectQuotaExceed or ErrorCode:WriteQuotaExceed)| SELECT Project, 
  COUNT(1) AS count where ErrorMsg like '%machine group count%' GROUP BY Project ORDER BY count DESC LIMIT 1000

分组评估

不分组

触发条件

说明

• 当有Project的机器组发生超限10次错误告警级别为严重。

• 当有Project的机器组发生超限1次错误时告警级别为中。

• 当有数据匹配count > 10时，严重度：严重。

• 当有数据匹配count > 1时，严重度：中。

输出目标

SLS通知

告警策略

普通模式

行动策略

按需选择或单击新增创建行动策略，具体操作，请参见创建行动策略。

参数项

赋值

规则名称

Logtail采集配置水位监控

检查频率

固定间隔，15分钟

查询统计

• 类型：指标库

• 授权方式：默认

• 指标库：internal-monitor-metric

• 查询区间：15分钟（相对）

• 查询语句：

  重要

  查询SQL默认返回100条数据，若在SQL结尾添加limit 1000，代表可返回1000条查询结果。

  * |  select Project, region, round(count_logtail_config/quota_logtail_config * 100, 3)  as logtail_config_ratio from 
  (SELECT A.id as Project , A.region as region, COALESCE(SUM(B.count_logtail_config), 0)  AS count_logtail_config , cast(json_extract(A.quota, '$.config') as double)  as quota_logtail_config
  FROM  "resource.sls.cmdb.project" as A
  LEFT JOIN (
    SELECT project, COUNT(*) AS count_logtail_config
    FROM "resource.sls.cmdb.logtail_config" as B
    GROUP BY project
  ) AS B ON A.id = B.project 
  group by A.id, A.quota, A.region) where  quota_logtail_config is not null   order by logtail_config_ratio desc limit 1000

分组评估

标签自动

触发条件

说明

• 当有Project的Logtail采集配置数超过额度的90%时告警级别为严重。

• 当有Project的Logtail采集配置数超过额度的80%时告警级别为中。

• 当有数据匹配logtail_config_ratio > 90时，严重度：严重。

• 当有数据匹配logtail_config_ratio > 80时，严重度：中。

输出目标

SLS通知

告警策略

普通模式

行动策略

按需选择或单击新增创建行动策略，具体操作，请参见创建行动策略。

参数项

赋值

规则名称

Logtail采集配置额度超限

检查频率

固定间隔，15分钟

查询统计

• 类型：日志库

• 授权方式：默认

• 日志库：internal-error_log

• 查询区间：15分钟（相对）

• 查询语句：

  重要

  查询SQL默认返回100条数据，若在SQL结尾添加limit 1000，代表可返回1000条查询结果。

  * and (ErrorCode: ExceedQuota or ErrorCode: QuotaExceed or ErrorCode: ProjectQuotaExceed or ErrorCode:WriteQuotaExceed)| SELECT Project, 
  COUNT(1) AS count where ErrorMsg like '%config count%' GROUP BY Project ORDER BY count DESC LIMIT 1000

分组评估

不分组

触发条件

说明

• 当有Project的Logtail采集配置发生超限10次错误告警级别为严重。

• 当有Project的Logtail采集配置发生超限1次错误时告警级别为中。

• 当有数据匹配count > 10时，严重度：严重。

• 当有数据匹配count > 1时，严重度：中。

输出目标

SLS通知

告警策略

普通模式

行动策略

按需选择或单击新增创建行动策略，具体操作，请参见创建行动策略。

参数项

赋值

规则名称

Project写入流量水位监控

检查频率

固定间隔，15分钟

查询统计

• 类型：指标库

• 授权方式：默认

• 指标库：internal-monitor-metric

• 查询区间：15分钟（相对）

• 查询语句：

  重要

  查询SQL默认返回100条数据，若在SQL结尾添加limit 1000，代表可返回1000条查询结果。

  (*)| SELECT Project, region , round(count_inflow/cast(quota_inflow as double) * 100, 3) as inflow_ratio
  FROM
  (SELECT cmdb.id as Project, cmdb.region as region, COALESCE(M.name1,0) as count_inflow, round(cast(json_extract(cmdb.quota, '$.inflow_per_min') as double)/1000000000, 3) as quota_inflow  from "resource.sls.cmdb.project" as cmdb  
  LEFT JOIN (
      select project,  round(MAX(name1)/1000000000, 3) as name1 from (SELECT __time_nano__ as time, element_at( split_to_map(__labels__, '|', '#$#') , 'project') as project,   sum(CASE WHEN __name__ = 'logstore_origin_inflow_bytes' THEN __value__ ELSE NULL END) AS name1
      FROM "internal-monitor-metric.prom" where __name__ ='logstore_origin_inflow_bytes' and regexp_like(element_at( split_to_map(__labels__, '|', '#$#') , 'project') , '.*') group by project,time )group by project) AS M ON cmdb.id = M.project )order by inflow_ratio desc  limit 1000

分组评估

标签自动

触发条件

说明

• 当有Project写入流量超过额度的90%时告警级别为严重。

• 当有Project写入流量超过额度的80%时告警级别为中。

• 当有数据匹配inflow_ratio > 90时，严重度：严重。

• 当有数据匹配inflow_ratio > 80时，严重度：中。

输出目标

SLS通知

告警策略

普通模式

行动策略

按需选择或单击新增创建行动策略，具体操作，请参见创建行动策略。

参数项

赋值

规则名称

Project写入流量额度超限

检查频率

固定间隔，15分钟

查询统计

• 类型：日志库

• 授权方式：默认

• 日志库：internal-error_log

• 查询区间：15分钟（相对）

• 查询语句：

  重要

  查询SQL默认返回100条数据，若在SQL结尾添加limit 1000，代表可返回1000条查询结果。

  * and (ErrorCode: ExceedQuota or ErrorCode: QuotaExceed or ErrorCode: ProjectQuotaExceed or ErrorCode:WriteQuotaExceed)| SELECT Project, 
  COUNT(1) AS count where ErrorMsg like '%Project write quota exceed: inflow%' GROUP BY Project ORDER BY count DESC LIMIT 1000

分组评估

不分组

触发条件

说明

• 当有Project写入流量发生超限10次错误告警级别为严重。

• 当有Project写入流量发生超限1次错误时告警级别为中。

• 当有数据匹配count > 10时，严重度：严重。

• 当有数据匹配count > 1时，严重度：中。

输出目标

SLS通知

告警策略

普通模式

行动策略

按需选择或单击新增创建行动策略，具体操作，请参见创建行动策略。

参数项

赋值

规则名称

Project写入次数水位监控

检查频率

固定间隔，15分钟

查询统计

• 类型：指标库

• 授权方式：默认

• 指标库：internal-monitor-metric

• 查询区间：15分钟（相对）

• 查询语句：

  重要

  查询SQL默认返回100条数据，若在SQL结尾添加limit 1000，代表可返回1000条查询结果。

  (*)| SELECT Project, region,  round(count_write_cnt/cast(quota_write_cnt as double) * 100, 3) as write_cnt_ratio
  FROM
  (SELECT cmdb.id as Project, cmdb.region as region, COALESCE(M.name1,0) as count_write_cnt,
  cast(json_extract(cmdb.quota, '$.write_cnt_per_min') as bigint) as quota_write_cnt from "resource.sls.cmdb.project" as cmdb  
  LEFT JOIN (
      select project,  MAX(name1) as name1 from (SELECT __time_nano__ as time, element_at( split_to_map(__labels__, '|', '#$#') , 'project') as project, 
    sum(CASE WHEN __name__ = 'logstore_write_count' THEN __value__ ELSE NULL END) AS name1
    FROM "internal-monitor-metric.prom" where __name__  = 'logstore_write_count' and regexp_like(element_at( split_to_map(__labels__, '|', '#$#') , 'project') , '.*')  group by project,time )group by project) AS M ON cmdb.id = M.project ) order by write_cnt_ratio desc  limit 1000

分组评估

标签自动

触发条件

说明

• 当有Project写入次数超过额度的90%时告警级别为严重。

• 当有Project写入次数超过额度的80%时告警级别为中。

• 当有数据匹配inflow_ratio > 90时，严重度：严重。

• 当有数据匹配inflow_ratio > 80时，严重度：中。

输出目标

SLS通知

告警策略

普通模式

行动策略

按需选择或单击新增创建行动策略，具体操作，请参见创建行动策略。

参数项

赋值

规则名称

Project写入次数额度超限

检查频率

固定间隔，15分钟

查询统计

• 类型：日志库

• 授权方式：默认

• 日志库：internal-error_log

• 查询区间：15分钟（相对）

• 查询语句：

  重要

  查询SQL默认返回100条数据，若在SQL结尾添加limit 1000，代表可返回1000条查询结果。

  * and (ErrorCode: ExceedQuota or ErrorCode: QuotaExceed or ErrorCode: ProjectQuotaExceed or ErrorCode:WriteQuotaExceed)| SELECT Project, 
  COUNT(1) AS count where ErrorMsg like '%Project write quota exceed: qps%' GROUP BY Project ORDER BY count DESC LIMIT 1000

分组评估

不分组

触发条件

说明

• 当有Project写入次数发生超限10次错误告警级别为严重。

• 当有Project写入次数发生超限1次错误时告警级别为中。

• 当有数据匹配count > 10时，严重度：严重。

• 当有数据匹配count > 1时，严重度：中。

输出目标

SLS通知

告警策略

普通模式

行动策略

按需选择或单击新增创建行动策略，具体操作，请参见创建行动策略。