ログがLog ServiceからObject Storage Service (OSS) に送信された後、ログはさまざまな形式で保存できます。 このトピックでは、CSV形式について説明します。
パラメーター
次の図は、配送ルールでストレージ形式にcsvを指定する場合に設定する必要があるパラメーターを示しています。 詳細については、「OSSデータ配布ジョブの作成 (新バージョン)」をご参照ください。
下表にパラメーターを示します。 詳細については、「コンマ区切り値 (CSV) ファイルの一般的な形式とMIMEタイプ」および「PostgreSQL 9.4.26ドキュメント」をご参照ください。
項目 | 説明 |
CSVフィールド | OSSに送信するログフィールド。 ログストアの [生ログ] タブでログフィールドを表示できます。 ログフィールドを1つずつ追加することを推奨します。 OSSに送信できるログフィールドには、__time__ 、__topic__ 、__source__ などの予約済みフィールドが含まれます。 予約フィールドの詳細については、「予約フィールド」をご参照ください。 説明
|
区切り文字 | ログフィールドに使用される区切り文字。 ログフィールドの区切り文字として、コンマ (、) 、縦棒 (|) 、スペース、またはタブ文字を使用できます。 |
脱出キャラクター | ログフィールドに区切り文字が含まれている場合は、エスケープ文字を使用してフィールドを囲む必要があります。 このように、区切り文字は、フィールドが読み取られるときにフィールドに影響を与えません。 |
無効なフィールド | CSVフィールドで指定したログフィールドがログに存在しない場合、[無効なフィールド] フィールドで指定した値が出荷されます。 |
出荷されたフィールド | ログフィールドの名前をCSVファイルに書き込むかどうかを指定します。 [出荷済みフィールド] をオンにすると、ログフィールドの名前がCSVファイルに書き込まれます。 |
OSS内のオブジェクトのURL
ログがOSSに送信されると、ログはOSSオブジェクトに保存されます。 次の表に、OSSオブジェクトのURLの例を示します。
説明
- OSS配送ジョブの作成時にオブジェクトサフィックスを指定すると、指定されたサフィックスが有効になります。
- OSSシッピングジョブの作成時にオブジェクトサフィックスを指定しない場合、サフィックスは圧縮タイプに基づいて決定されます。
圧縮型 | オブジェクト接尾辞 | URL example | 説明 |
Not compressed | オブジェクトのサフィックスを指定すると、指定されたサフィックスが有効になります。 Example: .suffix. | oss://oss-shipper-chengdu/ecs_test/2022/01/26/20/54_1453812893059571256_937.suffix | You can download the CSV file to your computer and open the file as a text file. |
オブジェクトのサフィックスを指定しない場合は、サフィックス。csvが使用されます。 | oss://oss-shipper-chengdu/ecs_test/2022/01/26/20/54_1453812893059571256_937.csv | ||
Snappy | オブジェクトのサフィックスを指定すると、指定されたサフィックスが有効になります。 例: .suffix. | oss:// oss-shipper-chengdu/ecs_test/2022/01/26/20/54_1453812893059571256_937.suffix | Snappy圧縮ファイルを開く方法の詳細については、「Snappy圧縮ファイルの解凍ツール」をご参照ください。 |
オブジェクトのサフィックスを指定しない場合は、サフィックス。snappy.csvが使用されます。 | oss:// oss-shipper-chengdu/ecs_test/2022/01/26/20/54_1453812893059571256_937.snappy.csv | ||
Gzip | オブジェクトのサフィックスを指定すると、指定されたサフィックスが有効になります。 例: .suffix. | oss:// oss-shipper-chengdu/ecs_test/2022/01/26/20/54_1453812893059571256_937.suffix | Gzipを使用してオブジェクトを圧縮する場合は、Gzipをインストールし、Gzipコマンドを使用してオブジェクトを解凍できます。 |
オブジェクトのサフィックスを指定しない場合は、サフィックス。gz.csvが使用されます。 | oss:// oss-shipper-chengdu/ecs_test/2022/01/26/20/54_1453812893059571256_937.gz.csv | ||
Zstandard | オブジェクトのサフィックスを指定すると、指定されたサフィックスが有効になります。 例: .suffix. | oss:// oss-shipper-chengdu/ecs_test/2022/01/26/20/54_1453812893059571256_937.suffix | Zstandardを使用してオブジェクトを圧縮する場合は、Zstandardをインストールし、Zstandardコマンドを使用してオブジェクトを解凍できます。 |
If you do not specify an object suffix, the suffix .zst.csv is used. | oss:// oss-shipper-chengdu/ecs_test/2022/01/26/20/54_1453812893059571256_937.zst.csv |