Simple Log Service：最佳實務

資料擷取

• IoT/嵌入式日誌

• 通過WebTracking採集日誌

• 搭建移動端日誌直傳服務

• 通過Logtail採集Zabbix資料

• 通過Logtail跨阿里雲帳號採集日誌

• 通過Logtail跨阿里雲帳號採集容器日誌

• 投遞CDN即時日誌到SLS來分析使用者訪問資料

時序儲存

使用Prometheus採集Kubernetes監控資料

查詢與分析

• 查詢和分析網站日誌

• 查詢和分析JSON日誌

• 關聯Logstore與MySQL資料庫進行查詢分析

• 關聯Logstore與OSS外表進行查詢和分析

• 採集和查詢分析Nginx監控日誌

• 分析Nginx訪問日誌

• 分析Apache日誌

• 分析IIS日誌

• 分析Log4j日誌

• 分析網站日誌

• 查詢剖析器日誌

• 分析負載平衡7層訪問日誌

• 分頁顯示查詢分析結果

• 分析行車軌跡日誌

• 分析銷售系統日誌

資料加工

• 調用函數清洗資料

• 事件判斷

• 處理日期時間

• 資料脫敏

• 解析Syslog標準格式資料

• 解析Nginx日誌

• 解析Java報錯日誌

• 提取字串動態索引值對

• 特定格式文本資料加工

• 解析CSV格式日誌

• 複雜JSON資料加工

• 將Logstore中的日誌欄位轉換MetricStore中的度量指標

• 從其他Logstore擷取資料進行資料富化

• 從OSS擷取IPIP庫進行IP地址資料富化

• 從OSS擷取IP2Location庫進行IP地址資料富化

• 從OSS擷取CSV檔案進行資料富化

• 從RDS MySQL資料庫擷取資料進行資料富化

• 使用RDS內網地址訪問RDS MySQL資料庫

• 使用資源函數增量擷取資料

• 使用e_dict_map、e_search_dict_map函數進行資料富化

• 從Hologres資料庫擷取資料進行富化

• 構建字典與表格做資料富化

• 使用e_table_map函數對HTTP請求返回碼進行富化

• 複製Logstore資料

• 跨地區傳輸資料

• 多目標Logstore資料分發

• 將不同Logstore的日誌資料匯總到一個Logstore

• 複製和分發資料

警示

• 基於日誌關鍵字設定警示

• 自訂分析警示日誌

可視化

• 添加變數類型的過濾器

• 添加過濾器類型的過濾器

消費與投遞

• 搭建監控系統

• 計量計費日誌

• 通過Consumer Library實現高可靠消費

日誌應用

Trace服務

• 匯出Trace資料到Grafana

• 接入Apache SkyWalking Trace資料到Log Service

• 在K8s環境下接入Apache SkyWalking Trace資料到Log Service

• 接入Kubernetes Ingress鏈路資料