全部產品
Search
文件中心

Data Management:功能概覽

更新時間:Jun 30, 2024

Data Management是一款支撐資料全生命週期的一站式資料管理平台,致力於協助企業快速挖掘資料價值,助力企業數字化轉型。

一級模組

二級模組

三級模組

功能描述

相關文檔

首頁

執行個體導覽列

新增執行個體

支援DBA、管理員錄入新執行個體。

雲資料庫錄入

執行個體搜尋

輸入執行個體、資料庫名稱、執行個體地址、DBLink名稱等,快速尋找執行個體。

執行個體列表

  • 展示當前租戶中狀態為正常、異常的執行個體,狀態為禁用、刪除的執行個體不會顯示在該列表中。

  • 查看執行個體基本資料,如執行個體狀態、管控模式、來源、類型、執行個體地區、環境等。

  • 提供執行個體和資料庫的右鍵快捷操作入口。

頂部功能區

阿里雲工單

如果您在使用DMS的過程中遇到問題,可以提交阿里雲工單。

使用者中心

您可以在使用者中心進行阿里雲帳號儲值、續約管理,查看訂單、費用賬單,購買、續約和升級DMS商品。

協助中心

  • 協助手冊:指導普通使用者使用DMS平台。

  • DingTalk交流群:您可以加入DMS的DingTalk交流群,交流群會提供使用者答疑。

我是普通使用者

語言切換

設定DMS介面的語言。

介面設定

自訂DMS平台的互動介面與主題皮膚顏色。

  • 頂部下拉式功能表:在頂部功能表列中選擇一級目錄後,自動出現下拉子功能表,快速進入各功能。

  • 捷徑功能表:可以將經常使用的功能收藏到捷徑功能表中,方便快速開啟常用功能。

  • 顯示標籤頁:允許同時開啟多個功能,每個功能以頁簽的形式展示。

  • DMS主題皮膚:DMS提供了藍色和黑色2種皮膚,預設藍色。

自訂DMS介面布局與樣式

使用者資訊

查看使用者名稱、UID、系統角色、租戶ID、租戶名等,設定、修改通知方式,退出登入,如果您的雲帳號在多個租戶中還可以切換租戶。

查看我的系統角色

資源搜尋

-

支援檢索資料庫、執行個體、表、功能和工單。

功能入口

快捷入口

提供資產大盤、新增執行個體和資料分析的快捷入口。

我的工單

快速進入您參與工單的管理頁面。

我的迭代

快速進入您參與迭代的列表頁面。

資產列表

最近訪問的資產

快捷進入最近訪問的資料庫的SQL視窗,查看資料庫效能、詳情。

有許可權的資產

查看您所擁有的許可權,包含庫許可權、表許可權、敏感列許可權、執行個體許可權、行許可權。可以對不需要的許可權進行合理地釋放,對即將到期的許可權按需提前申請。

查看我的許可權

我Owner的資產

快速查看您擁有哪些資源的Owner角色,Owner可查看對應資源的人員許可權情況,授予、回收對應資源的許可權。

查看資源角色

我關注的資產

快速進入您關注的庫表。

資料資產

全域搜尋

-

檢索資料庫、執行個體、表、功能和工單。

資產類目

-

對執行個體、庫、表進行業務分類歸屬管理,便於管理員、開發人員及營運人員能從業務視角更好地管理或使用資料表。

資產類目

執行個體管理

執行個體列表

  • 登入執行個體:自由操作和穩定變更模式的執行個體需要使用資料庫帳號密碼登入。

  • 編輯執行個體:變更新增執行個體時錄入的各項資訊。如管控模式、安全規則、環境類型、執行個體DBA等。

  • 重新整理/同步字典:採集資料庫上最新的表、欄位、索引、可程式化對象等中繼資料資訊。

  • 系統管理權限:授予、收回使用者的執行個體登入許可權、執行個體效能查看許可權。

  • 刪除執行個體:將執行個體從DMS的執行個體列表中移除,清除執行個體在DMS中的設定,如授權資訊。

  • 禁用執行個體:禁止執行個體在DMS中使用,執行個體在DMS的執行個體列表中不可見。

  • 存取控制:開啟執行個體的存取控制後,該執行個體僅能被有許可權的使用者查看和使用。

  • 變更視窗:對在SQL視窗中執行SQL變更語句進行限制,如在某個時間段內禁止變更DDL。

資料庫列表

  • 表詳情:查看錶結構、表索引,進行表相關的操作,如調整欄位敏感等級、資料Owner,匯出建表語句等。

  • 單庫查詢:可在SQL視窗進行自訂SQL語句的執行,查看執行結果。

  • 許可權管理:可管理當前資料庫上的人員許可權開通情況,進行回收與授予。

  • 執行個體詳情:查看資料庫對應的執行個體詳情。

  • 定位執行個體:定位該資料庫對應的執行個體。

  • 存取控制:開啟資料庫的存取控制後,該資料庫僅能被有許可權的使用者查看和使用。

  • 版本管理:自動記錄每一個資料庫版本,產生每個版本的建表語句,擷取兩個版本之間的差異指令碼。

SQL視窗

SQL視窗

可視化操作地區

支援查看當前資料庫的所有表、欄位、索引資料,也可以按右鍵目標表,進行編輯表結構、匯入資料、匯出資料等快捷操作。可建立、查看、執行和管理檢視、 預存程序、 函數、 觸發器、 事件等可程式化對象。

SQL視窗介紹

SQL命令地區

編寫SQL命令,對SQL語句進行格式化與執行,進行SQL診斷。支援對結果集進行編輯、更新的提交執行。提供智能SQL補齊提示功能,支援添加和管理常用SQL。

診斷SQL語句

執行結果地區

查看執行結果和執行歷史。執行結果以表格形式顯示,支援匯出Excel、Text結果集,產生結果集的Insert指令碼,可複製、下載結果集的單行或多行。

表列表

查看錶結構、表索引,並進行表相關的操作,如申請表許可權、申請資料Owner、調整資料Owner、查看錶詳情、匯出建表語句、匯出表結構、資料歸檔、敏感等級調整,使用代碼產生器產生簡易的代碼,簡化研發人員的資料庫代碼編碼量。

資料分析

一鍵構建企業級資料倉儲,支援從RDS MySQL即時同步資料至Analytic MySQL 3.0,提供資料分析、報表開發、周期調度、資料視覺效果等功能,充分挖掘資料價值。

一鍵建倉

資料庫效能分析

通過資料庫自治服務DAS的一鍵診斷、即時效能、即時會話、空間分析功能,您可以從多個角度瞭解資料庫狀況,及時定位並解決存在的問題,保障服務的安全性和穩定性。

資料庫效能

同步中繼資料

採集資料庫上最新的表、欄位、索引、可程式化對象等中繼資料資訊,用於實現表、欄位、可程式化對象的許可權分級管控。

同步字典

匯出

支援匯出資料庫、整庫表結構、整庫建表語句。

資料庫匯出

版本管理

資料庫版本列表自動記錄每一個資料庫版本,您可以查看每個版本的建表語句,支援擷取兩個版本之間的差異指令碼,可有效支援不同版本的管理需求。

管理表結構版本

Action Trail

支援針對單個資料庫的SQL查詢、工單、登入等資訊進行針對性審計,方便定位問題進行處理。

Action Trail

風險審計

支援針對中繼資料、敏感性資料、SQL審核進行全面風險識別,可有效提升資料庫的安全性與穩定性。

風險審計報告

分享

快速分享資料庫的SQL Console視窗與SQL命令地區的SQL語句。

快速分享頁面

超級SQL模式

支援管理員、DBA進入此模式,進入此模式後,通過SQL Console下發的SQL語句將不再進行安全規則攔截,適用於營運、應急處理。

超級SQL模式

拓撲

DMS為邏輯庫提供了查看分庫分布情況的功能。

資料庫開發

結構變更

結構設計

支援在研發過程中依照研發流程的設定依次推進各階段變更,對目標庫表進行符合研發規範地表結構設計。您可按需自訂不同業務線的研發流程,保障多套環境(例如開發環境、測試環境、生產環境)之間結構的一致性。

結構設計

結構同步

支援對比不同資料庫之間的表結構,產生差異化指令碼並執行到目標資料庫。該功能適用於對比、同步多套資料庫環境的表結構,例如生產庫與測試庫、不同的測試庫、不同的生產庫等。

結構同步

影子表同步

支援根據源表的表結構自動建立影子表(新的資料表,表名是在源表名上增加首碼或尾碼的方式產生),適用於全鏈路壓測等情境。

影子表同步

空庫初始化

支援將來源資料庫的表結構同步至空資料庫中(資料庫中不存在任何錶),實現快速同步資料庫表結構,適用部署多地區、多單元的資料庫環境。

空庫初始化

表一致性修複

用於多套不同環境之間(例如測試環境、生產環境),可以進行表結構對比、找出差異、並在目標環境執行差異指令碼,以保障兩套環境之間的結構一致性。表一致性修複也可用於對比邏輯庫的一致性,例如選擇一個表作為基準表,對比其他分表是否與該基準表結構完全一致。

表一致性修複

資料變更

普通資料變更

支援INSERT、UPDATE、DELETE、TRUNCATE等SQL語句,可以對資料庫中的資料進行更新操作,用於資料初始化、歷史資料清理、問題修複、功能測試等。

普通資料變更

無鎖變更

DML無鎖變更基於強大的DMS引擎將單個SQL拆分成多個批次執行,能更好地滿足業務方對大量資料變更的需求,例如歷史資料清理、全表更新欄位等,保證執行效率,減小對資料庫效能、資料庫空間等的影響。 DDL無鎖變更可以解決結構變更時的鎖表問題,較好地規避因資料庫變更導致鎖表以至於阻塞業務的現象,以及資料庫原生Online DDL帶來的主備延遲現象。

DML無鎖變更概覽

歷史資料清理

基於無鎖資料變更的分批執行能力,歷史資料清理可以定期清理歷史資料,防止歷史資料堆積對生產環境的穩定性產生影響。

歷史資料清理

可程式化對象

支援變更儲存程式,並且提供了正常化的管理流程來管控變更操作記錄。

可程式化對象

資料匯入

支援大批量資料快速匯入至資料庫,節省人力物力成本。

資料匯入

資料匯出

SQL結果集匯出

支援使用者編寫SQL查詢語句並匯出結果集資料。

SQL結果集匯出

資料庫匯出

支援匯出資料庫和部分表,也可以選擇只匯出資料庫、部分表的表結構或表資料,用於提取相關資料進行資料分析。

資料庫匯出

SQL審核

SQL審核工單

SQL審核功能結合安全規則的SQL審核最佳化建議,對上傳的SQL語句進行審核並提供最佳化建議,避免無索引或不規範的SQL語句,降低SQL注入風險。您可以在安全規則中自訂SQL規範,例如表要有主鍵、限制主鍵列類型及限制主鍵包含列的個數等。

SQL審核

環境構建

資料庫複製

提供了庫層級的資料複製能力,可以用於整庫資料同步,多環境資料庫初始化,如:開發環境、測試環境。

資料庫複製

測試資料構建

擁有強大的演算法引擎,支援批量產生各類隨機值、地區名、虛擬IP地址等資訊,大大減輕準備測試資料的負擔。

測試資料構建

資料追蹤工單

資料追蹤

資料追蹤功能可以快速按需找到目標時間段內的相關更新,匯總產生逆向的復原語句,追蹤完的資料可批量產生復原指令碼,通過資料變更工單最終執行到資料庫中,完成資料修複。

資料追蹤

研發空間

DevOps

DevOps支援自訂研發流程和控制研發流程品質,合理有效地保障研發流程順利開展,減少誤操作,保護資料安全。DevOps提供了逐階段推進研發流程的功能,每個迭代的階段內都可以直接建立相應類型的工單,使得開發協同性更好,開發更高效。

管理迭代

我的工單

查看和審批待處理工單,查看我提交的、已處理工單,查看工單狀態、工單詳情等。

審批工單

整合與開發(DTS)

資料移轉

-

協助您實現同構、異構資料來源之間的資料移轉,適用於資料上雲遷移、阿里雲內部跨執行個體資料移轉、資料庫拆分擴容等業務情境。

資料移轉方案概覽

資料訂閱

-

協助您擷取RDS MySQL、PolarDB MySQL版PolarDB分布式版、自建MySQL、Oracle的即時增量資料,您可以根據業務需求自由消費增量資料,適用於緩衝更新策略、業務非同步解耦、異構資料來源的資料即時同步和複雜ETL的資料即時同步等多種業務情境。

訂閱者案概覽

Data Integration

資料同步

協助您實現資料來源之間的資料即時同步,適用於資料異地多活、資料異地災備、本機資料災備、跨境資料同步、查詢與報表分流、雲BI及即時資料倉庫等多種業務情境。

資料同步方案概覽

離線整合

離線整合是一種低代碼開發資料加工任務的工具,可以組合各類任務節點形成資料流,通過周期調度運行達到資料加工、資料同步的目的。可解決企業批處理複雜巨量資料的難題,支援企業精細化營運、資料營銷、智能推薦等巨量資料業務情境。

離線整合概述

流式ETL

協助您實現流式資料地抽取、資料轉換和加工、資料裝載。豐富企業即時資料處理和計算情境,賦能企業數字化轉型。

什麼是ETL流式ETL

資料開發

任務編排

用於編排各類任務並進行調度執行,通過建立一個或多個任務節點群組成的任務流,實現複雜的任務調度,提高資料開發效率。

概述

異構資料庫遷移(ADAM)

資料庫評估

資料庫評估功能根據採集到的源庫資料,進行智能評估分析。從目標庫資料庫方案、目標庫相容度、遷移風險識別、應用改造建議、遷移成本等多維度給出分析報告。

資料庫評估概覽

資料庫改造遷移

資料庫改造遷移智能資料庫改造遷移工具,根據分析轉換結果,方便的進行源庫對比、結構遷移和結構訂正。

資料庫改造遷移

應用評估改造

保證使用者快速改造自己的應用,提供遷移資料庫的應用改造點,包括改造的具體位置和SQL內容,梳理應用程式框架,提供架構遷移指南。

應用評估改造摘要

資料庫割接

協助使用者在完成資料庫評估、資料庫改造遷移、應用評估改造後,將業務最終平滑地遷移到雲上資料庫。

建立割接專案

遷移實驗室

  • SQL周期性採集可以周期性採集資料庫中的SQL,並對SQL資訊自動合并。

  • SQL Adapter可以即時轉換從Oracle遷移到PolarDB PostgreSQL版(相容Oracle)的不完全相容的SQL,非同步記錄所有需要改造的SQL。

SQL轉換

將源庫的SQL語句轉化為目標庫的SQL語句,簡化研發人員在遷移資料庫時的代碼編碼量。

SQL轉換

安全與規範

許可權

-

支援租戶申請某個執行個體、資料庫、表、資料列、資料行的具體操作許可權(查詢、變更、匯出),審核通過後租戶即可執行許可權內的操作。管控的許可權包括執行個體登入許可權、效能查看許可權、庫許可權、表許可權、敏感列許可權、資料行許可權、可程式化對象許可權等。

存取控制許可權概述

安全規則

-

安全規則是對資料庫實現精細化管控的規則集合。在使用DMS的查詢、匯出、變更等功能時,通過安全規則管控這些功能行為,可以打造資料庫的操作規範和研發流程。

  • 安全規則集成了研發流程、研發規範、審批次程序,串聯起DMS產品內各個功能, 實現多人線上、協同管理資料庫。

  • 安全規則支援多種SQL引擎,能幫您進行自訂的SQL檢測與管控。

  • 安全規則提供非常強大的審批功能,您可以根據不同的使用者行為自訂不同的審批次程序。

建立安全規則

審批次程序

-

審批次程序和安全規則是相互關聯的,可以根據不同的使用者行為選擇或設定不同的審批次程序。單個審批節點為一個環節,DMS支援新增、編輯、刪除審批節點,審批節點中可以添加1個或多個審批人。

設定審批次程序

訪問IP白名單

-

對企業內員工使用Data Management服務的範圍進行有效管控,達到僅在部分特定信任網路環境下使用DMS的效果。

訪問IP白名單

Action Trail

-

支援查詢SQL視窗產生的SQL語句列表、工單列表、登入列表、動作記錄等。可以方便快速地定位、排查資料庫問題以及提供審計用途。

Action Trail

敏感性資料管理

敏感性資料資產

  • Sensitive Data Discovery and Protection功能可協助企業及時有效地發現與識別敏感性資料資產,避免敏感性資料濫用,有效保護企業的敏感性資料資產,防止資料泄露造成企業經營資損或者罰款。

  • 對敏感性資料進行統計,開通、關閉執行個體的Sensitive Data Discovery and Protection功能。

  • 敏感性資料列表支援調整欄位的敏感等級、脫敏規則,為欄位添加、回收使用者授權,進行行級管控。

規則配置

  • 通過識別模板對執行個體中庫表的欄位進行分類分級掃描,判斷是否有符合該規則的敏感欄位,還可以保護敏感等級高的欄位。

  • 系統內建了上百種敏感性資料識別規則,覆蓋了多個法律法規。若內建的識別模型不能滿足您的業務需求,可以自訂敏感性資料的識別模型構建專屬的敏感性資料識別能力。

  • Sensitive Data Discovery and Protection功能中內建了一個全遮掩的脫敏規則,如果您需要其他的脫敏方式,可以基於內建的某個脫敏演算法進行自訂。

敏感性資料審計

該功能可記錄敏感性資料在DMS中的使用方式,可以解決敏感性資料異常使用和資料泄露的溯源問題。

敏感性資料審計

資料浮水印

-

資料浮水印功能可以實現將浮水印嵌入資料或檔案中和提取檔案中的浮水印,此功能用於資料的散布或分發過程中追溯源頭。

資料浮水印

解決方案

資料歸檔

-

Data Management的資料歸檔功能定時將大表的資料歸檔至其他資料庫,解決線上資料越來越多影響查詢效能與業務運作的問題,同時支援源表資料刪除、資料表空間整理回收等。

資料歸檔概述

一鍵建倉

-

資料分析功能可以實現一鍵建立即時同步的資料倉儲,資料可在秒級的延遲下,同步至AnalyticDB MySQL版資料庫中,協助您更即時、準確地掌握業務情況,以便更好地進行業務分析和決策,提升業務效果。

一鍵建倉

資料庫遷移

-

通過產品化解決方案的封裝,實現資料庫遷移、校正和清理的閉環操作。同時支援庫名稱修改、遷移前預校正、遷移後資料一致性校正及來來源資料庫的清理,保證資料庫遷移整個生命週期的完整性。

資料庫遷移

營運管理

使用者管理

-

使用者管理功能可以添加、刪除DMS使用者,管控使用者權限,授權、回收執行個體、資料庫、表、行、敏感列。

使用者管理

任務管理

-

您可以在任務管理中建立SQL任務或管理工作。任務是指在DMS發起的變更SQL任務,例如普通資料變更、結構設計、庫表同步等,不包含在SQL視窗中直接執行的SQL。

任務管理

組態管理

-

DMS開放了系統層面的配置,管理員、DBA可對這些配置變更,實現更靈活的管理需求。例如,開啟雲上執行個體資源自動同步,開啟訪問來源IP白名單控制,開啟工作流程審批可越權模式等。

組態管理

通知管理

-

DMS提供多種工單、任務流不同狀態的通知功能,支援自訂接收對象,可實現訊息通知的按需、有效觸達。

訊息通知管理

資料庫分組

-

資料庫分組功能支援將多個資料庫環境、引擎類型相同的資料庫綁定成為一個分組。建立資料庫分組後,您可以在SQL變更或結構設計中快速載入該分組中的所有資料庫,工單提交後,變更可生效分組中的所有資料庫。

資料庫分組

-表示不涉及。