Simple Log Service:NGINXモニタリングログの収集、クエリ、分析

• 入力は必須であり、Logtail構成のデータソース設定を構成するために使用されます。

  重要

  inputsに指定できるデータソースの種類は1つだけです。

• processorsはオプションで、データを解析するLogtail設定のデータ処理設定を設定するために使用されます。 1つ以上の処理方法を指定できます。

  入力の設定のみに基づいてログを解析できない場合は、[プラグイン設定] フィールドでプロセッサを設定して、データ処理用のプラグインを追加できます。 たとえば、フィールドの抽出、ログ時間の抽出、データのマスク、ログのフィルタリングができます。 詳細については、「Logtailプラグインを使用したデータ処理」をご参照ください。

{
"inputs": [
 {
      "type": "metric_http",
      "detail": {
          "IntervalMs": 60000,
          "Addresses": [
              "http://${Server IP address}/nginx_status",
              "http://${Server IP address}/nginx_status",
              "http://${Server IP address}/nginx_status"
          ],
          "IncludeBody": true
      }
 }
],
"processors": [
 {
      "type": "processor_regex",
      "detail": {
          "SourceKey": "content",
          "Regex": "Active connections: (\\d+)\\s+server accepts handled requests\\s+(\\d+)\\s+(\\d+)\\s+(\\d+)\\s+Reading: (\\d+) Writing: (\\d+) Waiting: (\\d+)[\\s\\S]*",
          "Keys": [
              "connection",
              "accepts",
              "handled",
              "requests",
              "reading",
              "writing",
              "waiting"
          ],
          "FullMatch": true,
          "NoKeyError": true,
          "NoMatchError": true,
          "KeepSource": false
      }
 }
]
}                                

次の表に、主要なパラメーターを示します。

詳細については、「手順1: クエリステートメントの入力」をご参照ください。

• ログのクエリ

  • IPアドレスに関する情報を照会します。

    _address_ : 10.10.0.0

  • 応答時間が100ミリ秒を超えるリクエストを照会します。

    _response_time_ms_ > 100

  • HTTPステータスコード200が返されないリクエストを照会します。

    not _http_response_code_ : 200

• ログの分析

  • 待機中の接続、読み取り接続、書き込み接続、および5分間隔での接続の平均数を取得します。

    *| select  avg(waiting) as waiting, avg(reading)  as reading,  avg(writing)  as writing,  avg(connection)  as connection,  from_unixtime( __time__ - __time__ % 300) as time group by __time__ - __time__ % 300 order by time limit 1440                       

  • 待機中の接続数が最も多い上位10台のサーバーを取得します。

    *| select  max(waiting) as max_waiting, _address_, from_unixtime(max(__time__)) as time group by address order by max_waiting desc limit 10                        

  • IPアドレスの数を取得します。

    * | select  count(distinct(_address_)) as total                       

  • 失敗した要求が開始されたIPアドレスの数を取得します。

    not _result_ : success | select  count(distinct(_address_))                        

  • 最近失敗した10件のリクエストが開始されたIPアドレスを取得します。

    not _result_ : success | select _address_ as address, from_unixtime(__time__) as time  order by __time__ desc limit 10                       

  • 5分間隔でリクエストの総数を取得します。

    *| select  avg(handled) * count(distinct(_address_)) as total_handled, avg(requests) * count(distinct(address)) as total_requests,  from_unixtime( __time__ - __time__ % 300) as time group by __time__ - __time__ % 300 order by time limit 1440                       

  • 5分間隔で平均リクエスト待ち時間を取得します。

    *| select  avg(_response_time_ms_) as avg_delay,  from_unixtime( __time__ - __time__ % 300) as time group by __time__ - __time__ % 300 order by time limit 1440                      

  • 成功したリクエストと失敗したリクエストの数を取得します。

    not _http_response_code_ : 200  | select  count(1)                     

    _http_response_code_ : 200  | select  count(1)