本文將為您概要介紹DataWorks主要子模組的功能及基本使用情境。
使用流程與主要子模組
DataWorks為您提供從端到端的一站式資料開發治理平台,資料處理流程主要包括以下幾個階段。
各個階段DataWorks的主要子模組如下。
Data Integration
子模組:Data Integration
功能說明:
Data Integration是穩定高效、Auto Scaling的資料同步平台,致力於提供複雜網路環境下、豐富的異構資料來源之間高速穩定的資料移動及同步能力,支援離線、即時、以及兩者混合的同步方式,同時具備表層級粒度以及庫層級粒度的同步控制,例如,全增量資料即時同步,整庫離線同步等。
參考文檔:Data Integration概述
資料建模與開發
子模組:資料建模
功能說明:
資料建模是全鏈路資料治理的第一步,沉澱阿里巴巴資料中台建模方法論,從數倉規劃、資料標準、維度建模、資料指標四個方面,以業務視角對業務的資料進行詮釋,讓企業內部實現“數同文”的快速理解與流通。
參考文檔:DataWorks資料建模
子模組:資料開發(DataStudio)
功能說明:
資料開發(DataStudio)是一站式巨量資料開發平台,支援線上開發MaxCompute、EMR、Hologres、CDP、ADB等多種巨量資料引擎的資料處理任務。它整合了強大的任務調度能力,能夠支援千萬級的任務混合編排和調度。它還提供了一套任務發布的管控流程,保障任務產出的穩定性。
參考文檔:資料開發概述
子模組:營運中心
功能說明:
營運中心是一站式巨量資料營運、監控平台,支援即時查看任務的運行狀態,並為異常任務提供智能診斷、重跑等營運操作。它提供智能基準功能,協助您解決重要任務產出時間不可控、海量任務監控難等問題,保障任務產出的時效性。
參考文檔:營運中心概述
子模組:資料品質
功能說明:
資料品質針對資料研發的全鏈路,保障資料可用性。通過對資料品質規則的高效校正,以及與任務調度流程的緊密結合,可以協助使用者第一時間發現品質問題、有效防止資料品質問題擴散,為業務提供高效、可靠、可信賴的資料。
參考文檔:資料品質概述
資料分析
子模組:資料分析
功能說明:
DataWorks資料分析可協助您線上洞察分析、編輯和分享資料。包括SQL查詢、試算表等功能。
參考文檔:資料分析概述
資料治理
子模組:資料地圖
功能說明:
DataWorks資料地圖提供了企業級資料管理平台,能夠基於統一中繼資料的底層建設,提供資料對象的管理和盤點的能力,以及資料對象的快速尋找和深度理解的能力。
參考文檔:資料地圖概述
子模組:資訊安全中心
功能說明:
資訊安全中心是集資料資產分級分類、敏感性資料識別、資料授權管理、敏感性資料脫敏、敏感性資料訪問審計、風險識別與響應於一體的一站式資料安全治理介面,協助使用者落地資料安全治理事項。
參考文檔:資訊安全中心概述
子模組:資料治理中心
功能說明:
資料治理中心針對多個治理領域,通過資料領域規則沉澱、自動識別資產待最佳化問題項、覆蓋事後及事前的治理最佳化策略等方式協助使用者主動式、體系化完成資料治理工作。
參考文檔:資料治理中心概述
資料服務
子模組:資料服務
功能說明:
DataWorks資料服務旨在為企業提供全面的資料服務及共用能力,協助企業統一管理面向內外部的API服務。
參考文檔:資料服務概述
其他子模組
情境與子模組 | 功能說明 | 相關文檔 |
資料安全-資料保護傘 | DataWorks資料保護傘為資料安全管理產品,為您提供資料發現、資料脫敏、資料浮水印、存取控制、風險識別、資料溯源等功能。 | |
流程管控與開放性-開放平台 | DataWorks開放平台是DataWorks對外提供資料和能力的開放通道。DataWorks開放平台提供開放API(OpenAPI)、開放事件(OpenEvent)、擴充程式(Extensions)的能力,可以協助您快速實現各類應用系統對接DataWorks、方便快捷的進行資料流程管控、資料治理和營運,及時響應應用系統對接DataWorks的業務狀態變化。 | |
任務備份、遷移-遷移助手 | DataWorks遷移助手支援將開源調度引擎的作業遷移至DataWorks,支援作業跨雲、跨Region、跨帳號遷移,實現DataWorks作業快速複製部署,同時DataWorks團隊聯合巨量資料專家服務團隊,上線遷雲端服務,協助您快速實現資料與任務的上雲。 |