全部產品
Search
文件中心

DataWorks:優雅下線

更新時間:Sep 24, 2024

對於資料治理過程中的無效任務或表,資料治理中心為您提供完整的下線方案,包含下線風險評估、下線通知推送、下線過程管理等全流程功能,為您解決人工識別下線風險、任務存在正常調度的下遊任務時不能下線、因無法預知風險而不敢輕易下線等問題,同時提供大量下線功能,方便統一管理和執行,為您提升下線效率。

背景資訊

與傳統直接下線操作相比,優雅下線增加了下線影響分析、下線過程管理等流程。在各個階段支援通過多種方式給相關人員發送下線任務通知。

序號

操作

說明

1

選擇下線對象

您可以選擇下線對象,並評估影響面和風險,支援您手動選擇下線對象或系統自動推薦下線對象。

2

配置處理流程

您可以管理下線的全過程:

  • 支援您對待下線對象設定延遲調度、暫停調度等,同時您還可以設定任務靜默時間長度。

    • 延遲調度:將待下線對象的定時時間延長,讓待下線對象及其下遊對象產出的表資料延遲產出。

    • 暫停調度:將待下線對象的狀態設定為暫停(凍結),即在營運中心 > 周期任務介面中的該任務置為凍結狀態,待下線對象及其下遊對象將不再產出表資料。

  • 支援您重新命名下線對象產出的表資料,並在靜默時間後,對該表進行最終下線操作。

說明

靜默時間長度:當前階段執行後,等待多長時間可進行下一步操作。以暫停調度為例,下線任務暫停調度到達靜默時間長度後,才可進行下線對象操作。

3

定義計劃執行方式

下線流程的每一個步驟,支援您選擇人工觸發或全自動觸發步驟執行。

4

查看並管理下線計劃

您可以查看已建立的下線計劃詳情,並對下線計劃中添加的各個子任務進行查看執行詳情、取消、復原等操作。

使用限制

  • 僅空間管理員、租戶級資料治理管理員/工作空間級資料治理管理員及營運人員可建立下線計劃。角色添加詳情請參見增加空間成員並管理成員角色許可權

  • 下線計劃僅支援添加單個工作空間下的待下線對象。

  • 僅阿里雲主帳號、授予AliyunDataWorksFullAccess許可權的RAM使用者、空間管理員可對下線計划進行全部操作。營運人員只能操作自己建立的下線計劃,對於其他下線計劃僅擁有讀許可權。租戶級資料治理管理員/工作空間級資料治理管理員只能進行計劃的建立、配置和刪除,無法進行無許可權任務的啟動執行。

  • 一個下線計劃中最多可添加200個下線對象。

  • 優雅下線功能支援在下線任務步驟前對任務操作進行復原,在完成下線步驟前對錶操作進行復原。

注意事項

  • 已經處在下線計劃中的對象不能被選擇下線(即一個對象只能存在於一個下線計劃中)。

  • 特殊類型的對象不能被選擇下線。例如,工作空間的根節點、下線計劃所建立的虛擬節點等。

  • 待下線對象存在下遊依賴時,若受影響的下遊對象未在規定時間內主動移除與待下線對象的調度依賴,系統將會再產生一個虛擬節點,將下遊任務掛到虛擬節點上。

  • 各類型節點實際支援的步驟請以產品介面提示為準。

建立下線計劃

  1. 進入資料治理。

    1. 登入DataWorks控制台,切換至目標地區後,單擊左側導覽列的資料建模與開發 > 資料開發,在下拉框中選擇對應工作空間後單擊進入資料開發

    2. 單擊頂部功能表列左側的表徵圖表徵圖,選擇全部產品 > 資料治理 > 資料治理中心

  2. 單擊頂部功能表列的治理工作台,預設進入治理項問題頁面。

  3. 單擊左側導覽列的優雅下線

  4. 在頁面上方工作空間下拉框中選擇待下線對象所在的工作空間,下拉式清單中僅展示您已加入的工作空間。

    若您需要加入某個工作空間,可聯絡該空間管理員進行添加,詳情請參見增加空間成員並管理成員角色許可權

  5. 單擊優雅下線頁面中的建立計劃

    您還可以在治理項問題列表,對於需要下線的任務,單擊操作列的建立下線計劃,進入建立下線計劃頁面。

選擇下線對象

您可以在下線對象地區,根據需求選擇下線對象,包括任務

  • 下線任務:支援通過添加下線對象通過血緣匯入兩種方式添加下線任務。

  • 下線表:支援通過血緣匯入添加下線表。

說明
  • 已經處在下線計劃中的對象不能被選擇下線(即一個對象只能存在於一個下線計劃中)。

  • 特殊類型的對象不能被選擇下線。例如,工作空間的根節點、下線計劃所建立的虛擬節點等。

配置處理流程

在添加完下線對象後,您可以對整體的下線流程進行精細化的配置,包括啟動下線、延遲調度、暫停調度、下線任務、重新命名產出表、刪除產出表、完成下線等階段,啟動下線計划到最終完成下線過程中,每一階段均支援您自主選擇是否執行該階段,若您不勾選某步驟,將預設跳過該步驟執行,直接進入下一階段。

配置項

說明

發送通知

支援系統內提示、郵件、DingTalk機器人等方式發送給指定人員。DingTalk機器人的相關配置,詳情請參見:情境實踐:發送警示訊息至DingTalk群

說明

系統內提示資訊,請前往資料治理中心 > 治理工作台 > 我的待辦 > 治理提醒頁面進行查看。

通知人員

支援通知給下線任務責任人、下線任務產出表負責人、下線任務所處基準負責人等受影響方,各階段支援通知人員請以介面為準。

靜默時間長度

當前階段執行後,等待多長時間可進行下一步操作。以暫停調度為例,任務暫停調度到達靜默時間長度後,才可進行下線操作。

定義計劃執行方式

設定下線計劃各階段執行方式,您可選擇人工觸發步驟執行或全自動觸發步驟執行。

  • 人工觸發步驟執行:下線流程的每一個步驟,需要下線計劃建立者人工確認後,才能進入下一個步驟。

  • 全自動觸發步驟執行:下線流程的每一個步驟,按照配置的靜默時間,到期後,進入下一個步驟。

查看並管理下線計劃

您可以在優雅下線介面查看下線計劃列表,並可執行取消刪除下線計劃中的全部對象。

說明
  • 取消下線計劃,僅取消執行中的任務,已完成下線的任務不受影響。

  • 刪除下線計劃時,系統將先取消執行中的任務,已完成下線的任務不受影響,取消成功後將會刪除該下線計劃。刪除後該操作無法復原。

您還可以單擊操作列的執行詳情查看下線計劃的配置詳情,同時,您可以對下線計劃中的單個下線任務進行如下操作:

功能

說明

查看執行詳情

查看單個任務下線詳情,包括流程執行進度、狀態及各流程執行詳情,同時您還可以對當前任務的下線流程進行取消、復原等操作。

  • 取消任務:您可以取消當前任務下線流程中未完成的步驟。

  • 復原任務:您可以將當前任務所有下線步驟復原到初始狀態,不支援單個步驟的復原操作。

    說明
    • 如果下線計劃已取消,則不支援復原操作。

    • 如果子步驟在執行中,則不支援復原操作。

    • 下線任務步驟後不可以復原任務,優雅下線計劃完成後不可以進行復原操作。

前往營運

快速進入生產營運中心,查看任務的營運詳情。

前往編輯

快速進入資料開發介面,編輯任務。