設定查詢統計語句

需求

監控Nginx訪問日誌，每15分鐘的5xx錯誤超過500次則觸發警示，並且在警示內容中列出具體的出錯的主機資訊。

配置

結果

• 查詢統計0的結果

  統計15分鐘內發生5xx錯誤的次數。

  cnt

  cnt

  1234

• 查詢統計1的結果

  統計15分鐘內發生5xx錯誤最多的Top5主機及對應的錯誤次數。

  host	pv

  host	pv
  host1	60
  host2	55
  host3	47
  host4	45
  host5	30

• 集合操作結果

  當選擇集合操作為不合并時，集合操作結果為查詢統計0的結果。

樣本1

• 需求：

  同時監控OSS訪問日誌和SLB訪問日誌，每15分鐘統計一次OSS的4xx錯誤和SLB的5xx錯誤，當總次數達到1000次時觸發警示。

• 配置：

• 結果：

  • 查詢統計0的結果

    統計15分鐘內出現OSS 4xx錯誤的次數。

    pv

    pv

    890

  • 查詢統計1的結果

    統計15分鐘內出現SLB 5xx錯誤的次數。

    pv

    pv

    567

  • 集合操作結果

    當選擇集合操作為笛卡爾積時，集合操作結果如下：

    $0.pv	$1.pv

    $0.pv	$1.pv
    890	567

其他樣本

• 查詢統計0結果

  a	b

  a	b
  a1	b1
  a2	b2
  a5	b5

• 查詢統計1結果

  a	c

  a	c
  a1	c1
  a3	c3

• 集合操作結果

  當選擇集合操作為笛卡爾積時，集合操作結果如下：

  $0.a	b	$1.a	c

  $0.a	b	$1.a	c
  a1	b1	a1	c1
  a1	b1	a3	c3
  a2	b2	a1	c1
  a2	b2	a3	c3
  a5	b5	a1	c1
  a5	b5	a3	c3

樣本1

• 需求

  北京和上海地區分別有2個用於儲存Nginx訪問日誌的Logstore，每15分鐘統計一次5xx錯誤超過30次的主機數。當兩個Logstore中合格主機數超過10個時，觸發警示。

• 配置

• 結果

  • 查詢統計0的結果

    統計15分鐘內發生5xx錯誤超過30次的主機及對應的錯誤次數。

    host	pv

    host	pv
    host1	60
    host2	55
    host3	47
    host4	45
    host5	31

  • 查詢統計1的結果

    統計15分鐘內發生5xx錯誤超過30次的主機及對應的錯誤次數。

    host	pv

    host	pv
    hosta	70
    hostb	45
    hostc	44
    hostd	42

  • 集合操作結果

    當選擇集合操作為拼接時，集合操作結果如下：

    host	pv

    host	pv
    host1	60
    host2	55
    host3	47
    host4	45
    hosg5	31
    hosta	70
    hostb	45
    hostc	44
    hostd	42

其他樣本

• 當2個查詢統計結果中的欄位不完全一致時，進行拼接後，無匹配的欄位留空。

  • 查詢統計0結果

    a	b

    a	b
    a1	b1
    a2	b2

  • 查詢統計1結果

    b	c

    b	c
    b1	c1
    b2	c2

  • 集合操作結果

    a	b	c

    a	b	c
    a1	b1	無
    a2	b2	無
    無	b1	c1
    無	b2	c2

• 當存在3個查詢統計時，查詢統計0和查詢統計1的結果先完成集合操作，再與查詢統計2結果拼接。

  • 查詢統計0結果

    a	b

    a	b
    a1	b1
    a2	b2

  • 查詢統計1結果

    a	b

    a	b
    a1	b11
    a2	b22
    a3	b33

  • 查詢統計0結果與查詢統計1結果的拼接結果

    當選擇集合操作為內聯，$0.a == $1.a時，集合操作結果如下：

    a	$0.b	$1.b

    a	$0.b	$1.b
    a1	b1	b11
    a2	b2	b22

  • 查詢統計2結果

    a	b

    a	b
    a3	b333
    a4	b444

  • 集合操作結果

    當選擇集合操作為拼接時，集合操作結果如下：

    說明

    查詢統計2結果中欄位b與欄位$0.b對齊。

    a	$0.b	$1.b

    a	$0.b	$1.b
    a1	b1	b11
    a2	b2	b22
    a3	b333	無
    a4	b444	無

樣本1

• 需求

  監控指定Bucket中發生5xx錯誤的次數，當每15分鐘內出現1000次5xx錯誤時觸發警示。此需求中，需添加資源資料，用於維護Bucket白名單。

• 配置

• 結果

  • 查詢統計0的結果

    統計15分鐘內發生5xx錯誤次數超過1000次的Bucket。

    bucket	pv

    bucket	pv
    bucket_01	1600
    bucket_02	1550
    bucket_03	1470
    bucket_04	1450

  • 查詢統計1的結果

    Bucket的資源資料。

    bucket	desc

    bucket	desc
    bucket_03	for dev team
    bucket_04	for test team
    bucket_05	for service team
    bucket_06	for support team

  • 集合操作結果

    當選擇集合操作為內聯，$0.bucket == $1.bucket時，集合操作結果如下：

    bucket	pv	desc

    bucket	pv	desc
    bucket_03	1470	for dev team
    bucket_04	1450	for test team

樣本2

• 需求

  北京和上海地區分別有2個用於儲存Nginx訪問日誌的Logstore，每15分鐘統計一次發生5xx錯誤超過30次的用戶端。北京和上海同時發生5xx錯誤，且北京的錯誤次數大於上海時觸發警示。

• 配置

• 結果

  • 查詢統計0結果

    統計15分鐘內北京地區發生5xx錯誤超過30次的用戶端及對應的錯誤數。

    client_ip	pv

    client_ip	pv
    192.0.2.4	60
    192.0.2.5	55
    192.0.2.6	47
    192.0.2.7	45
    192.0.2.8	31

  • 查詢統計1結果

    統計15分鐘內上海地區發生5xx錯誤超過30次的用戶端及對應的錯誤數。

    client_ip	pv

    client_ip	pv
    192.0.2.5	70
    192.0.2.6	45
    192.0.2.7	44
    192.0.2.8	42
    192.0.2.9	42

  • 集合操作結果

    當選擇集合操作為內聯，$0.client_ip == $1.client_ip，$0.pv > $1.pv時，集合操作結果如下：

    client_ip	pv

    client_ip	pv
    192.0.2.6	47
    192.0.2.7	45

其他樣本

當2個查詢統計結果中的非關聯欄位存在同名時，集合操作的結果集合自動為欄位添加$0、$1首碼。

• 查詢統計0結果

  a	b	c	d

  a	b	c	d
  a1	b1	c1	d1
  a2	b2	c2	d2
  a3	b3	c3	d3

• 查詢統計1結果

  a	b	c

  a	b	c
  a1	b11	c11
  a2	b22	c22

• 集合操作結果

  當選擇集合操作為內聯，$0.a == $1.a時，集合操作結果如下：

  a	$0.b	$0.c	d	$1.b	$1.c

  a	$0.b	$0.c	d	$1.b	$1.c
  a1	b1	c1	d1	b11	c11
  a2	b2	c2	d2	b22	c22

查詢統計0結果

查詢統計1結果

集合操作結果

當選擇集合操作為左聯，$0.a == $1.a時，集合操作結果如下：

查詢統計0結果

查詢統計1結果

集合操作結果

當選擇集合操作為右聯，$0.a == $1.a時，集合操作結果如下：

查詢統計0

查詢統計1結果

集合操作結果

當選擇集合操作為全聯，$0.a == $1.a時，集合操作結果如下：

需求

監控除指定Bucket外的其他Bucket發生5xx錯誤的次數，當每15分鐘內出現1000次5xx錯誤時觸發警示。此需求中，需添加資源資料，用於維護Bucket黑名單。

配置

結果

• 查詢統計0的結果

  統計15分鐘內出現5xx錯誤超過1000次的Bucket。

  bucket	pv

  bucket	pv
  bucket_01	60
  bucket_02	55
  bucket_03	47
  bucket_04	45

• 查詢統計1的結果

  Bucket的資源資料。

  bucket	desc

  bucket	desc
  bucket_03	for dev team
  bucket_04	for test team

• 集合操作結果

  當選擇集合操作為左斥，$0.bucket == $1.bucket時，集合操作結果如下：

  bucket	pv

  bucket	pv
  bucket_01	60
  bucket_02	55

需求

監控除指定Bucket外的其他Bucket發生5xx錯誤的次數，當每15分鐘內出現1000次5xx錯誤時觸發警示。此需求中，需添加資源資料，用於維護Bucket黑名單。

配置

結果

• 查詢統計0的結果

  Bucket的資源資料。

  bucket	desc

  bucket	desc
  bucket_03	for dev team
  bucket_04	for test team

• 查詢統計1的結果

  統計15分鐘內出現5xx錯誤超過1000次的Bucket。

  bucket	pv

  bucket	pv
  bucket_01	60
  bucket_02	55
  bucket_03	47
  bucket_04	45

• 集合操作結果

  當選擇集合操作為右斥，$0.bucket == $1.bucket時，集合操作結果如下：

  bucket	pv

  bucket	pv
  bucket_01	60
  bucket_02	55