全部產品
Search
文件中心

Simple Log Service:CSV格式

更新時間:Jul 17, 2024

Log Service將日誌投遞到OSS後,支援儲存為不同的檔案格式。本文介紹CSV格式。

參數配置

配置投遞規則時,如果選擇儲存格式csv,對應的參數配置如下所示。

CSV欄位配置

參數說明如下所示。更多資訊,請參見CSV標準postgresql CSV說明

參數

說明

CSV欄位

您可以在Log Service的原始日誌頁簽中查看日誌欄位的Key,將您需要投遞到OSS的欄位名(Key)有序填入。 除了日誌內容的Key和Value外,Log Service還提供保留欄位__time____topic____source__,保留欄位更多資訊,請參見保留欄位

說明
  • 同一個Key在CSV欄位中只能配置一次,不支援多次使用。

  • 如果您的日誌中存在同名欄位(例如都為request_time),則Log Service會將其中一個欄位名顯示為request_time_0,底層儲存的欄位名仍為request_time。因此您在投遞時,只能使用原始欄位名request_time

    存在同名欄位時,系統只隨機投遞其中一個欄位的值。請盡量避免日誌中使用同名欄位。

分隔字元

支援半形逗號(,)、豎線(|)、空格和定位字元,用於分割不同欄位。

轉義符

當欄位內出現分隔字元時,需要使用轉義符包裹該欄位,避免讀資料時造成欄位錯誤分割。

無效欄位內容

CSV欄位中指定的Key不存在時,投遞此參數配置的內容。

投遞欄位名稱

開啟投遞欄位名稱開關後,將欄位名稱寫入到CSV檔案。

OSS檔案地址

投遞到OSS後,OSS檔案地址範例如下所示。

壓縮類型

檔案尾碼

OSS檔案地址舉例

說明

無壓縮

.csv

oss://oss-shipper-shenzhen/ecs_test/2016/01/26/20/54_1453812893059571256_937.csv

未壓縮的CSV檔案可下載到本地,以文本方式開啟查看。

Snappy

.snappy.csv

oss://oss-shipper-shenzhen/ecs_test/2016/01/26/20/54_1453812893059571256_937.snappy.csv

Snappy壓縮檔的開啟檔案,請參見開啟Snappy壓縮檔