全部產品
Search
文件中心

Data Transmission Service:配置源庫資訊

更新時間:Jul 06, 2024

本文介紹配置源庫資訊的具體方法。

前提條件

  • 當前僅支援在華東1(杭州)、華東2(上海)、華北1(青島)、華北2(北京)、華北3(張家口)、華南1(深圳)、華南3(廣州)和中國香港建立ETL任務。

  • 當前源庫支援MySQLPolarDB MySQLOraclePostgreSQLDB2 iSeries(AS/400)DB2 LUWDRDS(PolarDB-X 1.0)、PolarDB PostgreSQLMariaDBPolarDB OracleSQLServerPolarDB-X 2.0

  • 已建立源庫。

操作步驟

說明

下文以配置一個MySQL為例進行介紹。

  1. 進入ETL任務的列表頁面。

    1. 登入Data Management服務

    2. 在頂部功能表列中,單擊整合與開發(DTS)

    3. 在左側導覽列,選擇Data Integration > 流式ETL

  2. 單擊左上方的新增資料流,在新增資料流對話方塊中,您需在資料流名稱配置ETL任務名稱,選擇開發方式DAG

  3. 單擊確認

  4. 在頁面左側,將輸入/維表 MySQL節點拖拽至頁面右側畫布的空白地區。

  5. 單擊畫布地區的輸入/維表 MySQL-1,根據頁面資訊配置源庫資訊。

    1. 設定以下參數,配置節點資訊。

      配置源庫資訊_節點配置

      參數

      說明

      請輸入資料來源名稱

      DTS會自動產生一個任務名稱,建議配置具有業務意義的名稱(無唯一性要求),便於後續識別。

      地區

      選擇源庫所在地區。

      說明

      當前僅支援在華東1(杭州)、華東2(上海)、華北1(青島)、華北2(北京)、華北3(張家口)、華南1(深圳)、華南3(廣州)和中國香港建立ETL任務。

      執行個體列表

      選擇源庫所在資料庫執行個體的執行個體名稱。您也可以單擊下方的建立執行個體進行建立,建立方法請參見執行個體管理

      節點類型

      選擇節點類型。

      • 流表

      • 維表

      轉換格式

      節點類型選擇為流表時,需要選擇轉換格式。

      • Upsert流

      • Append-Only流

      庫表選擇

      選擇需要轉換的庫表。

      說明

      當您完成庫表的選擇時,系統自動進入輸出欄位頁面。

    2. 根據實際需要,在輸出欄位頁簽的列名稱列,勾選需要的欄位。

    3. 可選:如果選擇的節點類型為流表,請單擊時間屬性頁簽,設定以下參數,完成輸入/維表 MySQL-1的配置。

      配置源庫資訊_時間屬性

      參數

      說明

      選擇事件時間Watermark欄位

      選擇資料產生事件時代表時間的欄位。

      事件時間Watermark延遲時間

      輸入資料產生事件時的延遲時間。

      處理時間ProcTime

      輸入事件處理時間的欄位。

執行結果

完成配置的源庫右側不顯示配置源庫資訊_驚嘆號時,說明配置完成。

後續步驟

配置轉換組件