全部產品
Search
文件中心

DataWorks:流程管控

更新時間:Jun 19, 2024

DataWorks提供了全鏈路的資料開發治理能力,為您提供了統一的資料開發治理流程,同時也支援您在DataWorks的預設流程上基於自己的業務需求在關鍵的流程節點進行流程管控。本文為您介紹DataWorks在資料開發過程中支援的流程管控能力。

背景資訊

DataWorks的工作空間分為標準模式和簡單模式,不同模式工作空間下任務的開發流程存在一定差異,兩種模式的資料開發流程示意如下。
  • 標準模式工作空間開發流程標準模式工作空間開發流程
  • 簡單模式工作空間開發流程簡單模式工作空間開發流程
如上圖所示,在通用流程的關鍵節點,例如,任務運行調試前、任務提交前、任務發布前,您可以進行流程管控。
任務運行前校正樣本任務提交前校正樣本任務發布前校正樣本
代碼運行檔案提交檔案發布
您可以通過DataWorks的開放平台、資料治理等功能模組,實現在關鍵節點對資料開發流程的管控校正。
涉及的功能模組運行前校正提交前校正發布前校正流程管控能力引導介紹
資料治理中心支援支援支援DataWorks的資料治理中心為您內建了多個檢查項,您可以根據業務需要選擇開啟對應的檢查項,開啟後,後續在涉及到對應操作時即會觸發DataWorks的內建校正邏輯對當前操作進行管控校正,管控校正完成後才會繼續後續流程。
開放平台支援支援支援如果DataWorks的內建檢查項不足以滿足您的流程管控需求,您也可以使用開放平台,針對需要管控的事件自行開發校正程式,並將管控流程嵌入資料開發流程中。
下文以標準模式工作空間的情境為例,為您介紹這些關鍵節點的流程管控能力。

啟用內建檢查項:資料治理中心

DataWorks的資料治理中心為您內建了多個檢查項,您可以根據業務需要選擇開啟對應的檢查項,開啟後,後續在涉及到對應操作時即會觸發DataWorks的內建校正邏輯對當前操作進行管控校正,管控校正完成後才會繼續後續流程。
細分介紹
涉及DataWorks功能模組DataWorks資料治理中心
DataWorks的資料治理中心內建了很多檢查項,開啟後即可以進行對應操作的管控校正。檢查項
  • 運行前管控時:您可根據需要開啟生效檢查環節為代碼運行前置事件的檢查項。
  • 提交前管控時:您可根據需要開啟生效檢查環節為檔案提交前置事件的檢查項。
  • 發布前管控時:您可根據需要開啟生效檢查環節為檔案發布前置事件的檢查項。
配置入口與指導您需要在資料治理中心啟用檢查項,並設定啟用的檢查項在哪個工作空間生效。

通用操作指導請參見配置治理項

自訂校正邏輯:開放平台

如果DataWorks的內建檢查項不足以滿足您的流程管控需求,您也可以使用開放平台,針對需要管控的事件自行開發校正程式,並將管控流程嵌入資料開發流程中。調試運行前的自訂校正邏輯的管控校正能力介紹如下。
細分介紹
涉及DataWorks功能模組DataWorks開放平台

DataWorks開放平台提供開放事件(OpenEvent)、擴充程式(Extensions)和OpenAPI功能,您可以通過OpenEvent訂閱使用者在DataStudio中的操作事件訊息,並在事件訊息後,通過Extensions功能,自訂一個校正審批程式,並將程式的審批結果通過OpenAPI回調給DataWorks系統。OpenEvent和Extensions的詳細介紹請參見OpenEvent概述擴充程式概述

校正流程如果您使用開放平台功能,配置了對DataStudio中關鍵操作的事件訂閱與事件校正,則當使用者進行對應操作時會觸發校正流程,以運行前管控為例,管控校正流程如下。運行前校正流程
配置入口與指導您需要在開放平台中配置訂閱DataStudio的事件,並自行開發事件處理的擴充程式,將擴充程式上線至DataWorks,並設定在哪個工作空間啟用。
  • 運行前管控時:您需要訂閱處理運行類的事件,例如檔案運行前置事件
  • 提交前管控時:您需要訂閱處理提交類的事件,例如檔案提交前置事件表提交前置事件
  • 發布前管控時:您需要訂閱處理髮布類的事件,例如檔案發布前置事件表發布前置事件
更多開放平台支援訂閱管控的事件類型請參見擴充程式概述