全部產品
Search
文件中心

Data Lake Analytics - Deprecated:典型情境

更新時間:Jul 06, 2024

基於湖構建資料平台,支援BI、挖掘等業務

Object Storage Service可以作為湖儲存,DLA基於OSS構建一站式的巨量資料平台。具體包括構建資料湖、資料ETL、互動式查詢、機器學習等功能。

  • 構建資料湖
    • 即時資料湖:支援DB的CDC與訊息資料(如Kafka)入湖,構建大規模的可以增刪改查的資料集,延遲為T+10分鐘。
    • 一鍵建倉 :支援資料庫一鍵入湖,T+1天。
    • 檔案上傳:資料上傳後,DLA中繼資料發現功能可自動探索並構建好中繼資料體系。
  • 資料ETL:DLA支援Spark,提供強大的資料ETL能力,把ODS層的未經處理資料清洗為結構化的DW資料。
  • 機器學習:DLA支援Spark,支援開源演算法庫。
  • 互動式分析:DLA提供Presto互動式分析,支援BI、分析師的資料分析訴求。

聯邦分析:同時串連多個資料來源做資料的分析

  • 聯邦分析:DLA Presto可對接數十種資料來源對各種資料來源進行查詢。
  • 輕量級清洗方案:可以通過Presto滿足輕量級資料ETL,從OSS寫入資料到資料庫。