Simple Log Service:syslogの収集

概要

Linuxサーバーでは、rsyslogなどのsyslogエージェントを使用して、指定されたIPアドレスとポートを使用してオンプレミスのsyslogをサーバーに転送できます。 指定されたサーバーにLogtail設定を適用すると、LogtailはTCPまたはUDP経由で転送されたsyslogを受信します。 Logtailは、指定されたsyslogプロトコルに基づいてsyslogを解析し、syslogからファシリティ、タグ (プログラム) 、重大度、およびコンテンツフィールドを抽出します。 RFC 3164およびRFC 5424で定義されているsyslogプロトコルがサポートされています。

実装

手順

1. にログインします。Simple Log Serviceコンソール.

2. [データのインポート] セクションで、[カスタムデータプラグイン] を選択します。

3. プロジェクトとLogstoreを選択します。 [次へ] をクリックします。

4. マシングループを作成します。

   • マシングループが利用可能な場合は、[既存のマシングループを使用] をクリックします。

   • 使用可能なマシングループがない場合は、次の手順を実行してマシングループを作成します。 この例では、Elastic Compute Service (ECS) インスタンスが使用されています。

     1. [ECSインスタンス] タブで、[手動でインスタンスを選択] を選択します。 次に、使用するECSインスタンスを選択し、[作成] をクリックします。

        詳細については、「ECSインスタンスへのLogtailのインストール」をご参照ください。

        重要

        お使いのサーバーが、Simple Log Serviceとは異なるAlibaba Cloudアカウントに属するECSインスタンス、データセンター内のサーバー、またはサードパーティのクラウドサービスプロバイダーのサーバーの場合、サーバーにLogtailを手動でインストールする必要があります。 詳細については、「LinuxサーバーにLogtailをインストールする」または「WindowsサーバーにLogtailをインストールする」をご参照ください。 Logtailを手動でインストールした後、サーバーのユーザー識別子を設定する必要があります。 詳細については、「ユーザー識別子の設定」をご参照ください。

     2. 設定を確認したら、[OK] をクリックします。

     3. Logtailをインストールしたら、[インストールの完了] をクリックします。

     4. [マシングループの作成] ステップで、[名前] パラメーターを設定し、[次へ] をクリックします。

        Simple Log Serviceでは、IPアドレスベースのマシングループとカスタム識別子ベースのマシングループを作成できます。 詳細については、「IPアドレスベースのマシングループの作成」および「カスタム識別子ベースのマシングループの作成」をご参照ください。

5. [応用サーバーグループ] セクションにマシングループが表示されていることを確認し、[次へ] をクリックします。

   重要

   マシングループを作成した直後にマシングループを適用すると、マシングループのハートビートステータスがFAILになる可能性があります。 この問題は、マシングループがSimple Log Serviceに接続されていないために発生します。 この問題を解決するには、[自動再試行] をクリックします。 問題が解決しない場合は、Logtailでハートビート接続が検出されない場合はどうすればよいですか?

6. [データソースの指定] ステップで、[設定名] および [プラグイン設定] パラメーターを設定します。 [次へ] をクリックします。

   次の例は、UDPおよびTCPで127.0.0.1をリッスンするようにLogtailを設定する方法を示しています。

   {
        "inputs": [
            {
                "type": "service_syslog",
                "detail": {
                    "Address": "tcp://0.0.0.0:9000",
                    "ParseProtocol": "rfc3164"
                }
            },
            {
                "type": "service_syslog",
                "detail": {
                    "Address": "udp://0.0.0.0:9001",
                    "ParseProtocol": "rfc3164"
                }
            }
        ]
    }

   パラメーター	データ型	必須	説明
   タイプ	String	課金されます	データソースのタイプ。 値をservice_syslogに設定します。
   アドレス	String	課金されません	Logtailがリッスンするリスニングプロトコル、アドレス、およびポート。 Logtailは、Logtail設定に基づいてデータをリッスンし、取得します。 パラメーターの値は、[tcp/udp]://[ ip ]:[ port] 形式です。 デフォルト値: tcp:// 127.0.0.1:9999 この値は、Logtailがオンプレミスサーバーから転送されたログのみを受信することを示します。 説明 指定するリスニングプロトコル、IPアドレス、およびポートは、rsyslogの構成ファイルに追加された転送ルールで指定されたものと同じである必要があります。 Logtailサーバーが複数のIPアドレスを使用してデータを受信する場合は、Addressパラメーターを0.0.0.0に設定します。 この値は、LogtailがサーバーのすべてのIPアドレスをリッスンすることを示します。
   ParseProtocol	String	課金されません	Logtailがsyslogの解析に使用するプロトコル。 デフォルトでは、このパラメーターは空です。これは、syslogが解析されないことを示します。 有効な値： Empty: Logtailはsyslogを解析しません。 rfc3164: LogtailはRFC 3164プロトコルを使用してsyslogを解析します。 rfc5424: LogtailはRFC 5424プロトコルを使用してsyslogを解析します。 auto: Logtailは、syslogの内容に基づいてプロトコルを自動的に選択します。
   IgnoreParseFailure	Boolean	課金されません	syslogの解析が失敗した後に、syslogに対して操作を実行するかどうかを指定します。 デフォルト値: true。 この値は、システムがsyslogを解析せず、syslogをcontentフィールドに追加することを示します。 値をfalseに設定すると、解析に失敗した後、syslogは破棄されます。

7. データをプレビューし、インデックスを設定し、[次へ] をクリックします。

   デフォルトでは、Log Serviceでフルテキストインデックスが有効になっています。 手動モードまたは自動モードで収集したログに基づいてフィールドインデックスを設定することもできます。 自動モードでフィールドインデックスを設定するには、[自動インデックス生成] をクリックします。 これにより、Log Serviceは自動的にフィールドインデックスを作成します。 詳細については、「インデックスの作成」をご参照ください。

   重要

   ログをクエリおよび分析する場合は、フルテキストインデックス作成またはフィールドインデックス作成を有効にする必要があります。 フルテキストインデックスとフィールドインデックスの両方を有効にすると、フィールドインデックスのみが使用されます。

8. [ログクエリ] をクリックします。 Logstoreのクエリと分析ページにリダイレクトされます。

   インデックスが有効になるまで約1分待つ必要があります。 次に、収集したログを [生ログ] タブで表示できます。 詳細については、「ログの照会と分析」をご参照ください。

トラブルシューティング

Logtailを使用してログを収集した後、プレビューページまたはクエリページにデータが表示されない場合は、loggerコマンドを実行してローカルLogtailにデータを送信できます。 次に、ライター、ネットワーク、またはLogtailが原因で問題が発生したかどうかを確認できます。

ローカルLogtailがデータを受信できる場合、ライターまたはネットワークが原因で問題が発生しました。

logger -n localhost -P 9000 -T "This is a TCP syslog message"
logger -n localhost -P 9001 -d "This is a UDP syslog message"

詳細については、「」をご参照ください。Logtailを使用してログを収集するときにエラーが発生した場合はどうすればよいですか?

サンプルログ

次の図は、syslogのサンプルを示しています。