全部產品
Search
文件中心

DataWorks:支援的資料來源及同步方案

更新時間:Nov 21, 2024

在配置同步任務前,您需要在資料來源管理頁面配置好需要同步的資料來源。Data Integration目前支援MySQL、MaxCompute、Hologres、OSS、Kafka等幾十種資料來源,各資料來源支援的同步方案及讀寫外掛程式不同,您可以根據實際需求,在配置同步任務中的源端和目標端時選擇合適的資料來源。

支援的資料來源及同步方案

Data Integration包括離線同步、即時同步和全增量同步處理任務三個功能模組,您可以根據各模組對資料來源的支援情況,選擇對應的功能模組進行同步任務的配置。

  • DataWorks離線同步為您提供資料讀取(Reader)和寫入外掛程式(Writer),以實現對資料來源的讀寫操作。

  • DataWorks即時同步支援您將多種輸入及輸出資料來源搭配組成同步鏈路進行單表或整庫資料的即時增量同步處理。

  • DataWorks還為您提供多種資料來源之間進行不同資料同步情境(整庫離線同步、全增量即時同步)的同步。

說明

資料來源

離線同步

即時同步

全增量同步處理任務

單表讀

單表寫

單表增量讀

單表增量寫

整庫增量讀

整庫增量寫

整庫離線讀

整庫離線寫

單表/整庫全增量即時讀

單表/整庫全增量即時寫

Amazon S3資料來源

支援

-

-

-

-

-

-

-

-

-

Amazon Redshift資料來源

支援

支援

-

-

-

-

-

-

-

-

AnalyticDB for MySQL 2.0資料來源

支援

支援

-

-

-

-

支援

-

-

-

AnalyticDB for MySQL 3.0資料來源

支援

支援

-

支援

-

支援

支援

-

-

支援

AnalyticDB for PostgreSQL資料來源

支援

支援

-

-

-

-

支援

-

-

-

ApsaraDB For OceanBase資料來源

支援

支援

-

-

支援

-

-

-

支援

-

Azure Blob Storage資料來源

支援

-

-

-

-

-

-

-

-

-

BigQuery資料來源

支援

-

-

-

-

-

-

-

-

-

ClickHouse資料來源

支援

支援

-

-

-

-

-

-

-

-

DataHub資料來源

支援

支援

支援

支援

-

支援

-

-

-

支援

DB2資料來源

支援

支援

-

-

-

-

支援

-

-

-

Doris資料來源

支援

支援

-

-

-

-

-

-

-

-

DM(達夢)資料來源

支援

支援

-

-

-

-

支援

-

-

-

DRDS(PolarDB-X 1.0)資料來源

支援

支援

-

-

-

-

支援

-

支援

-

Elasticsearch

支援

支援

-

支援

-

-

-

支援

-

支援

FTP資料來源

支援

支援

-

-

-

-

-

-

-

-

GBase8a

支援

支援

-

-

-

-

-

-

-

-

HBase

  • HBase Reader:支援

  • HBase20xsql Reader:支援

  • HBase Writer:支援

  • HBase 11xsql Writer:支援

-

-

-

-

-

-

-

-

HDFS資料來源

支援

支援

-

-

-

-

-

-

-

-

Hive

支援

支援

-

-

-

-

-

支援

-

-

Hologres資料來源

支援

支援

支援

支援

-

支援

支援

支援

-

支援

HttpFile資料來源

支援

-

-

-

-

-

-

-

-

-

HybridDB for MySQL資料來源

支援

支援

-

-

-

-

支援

-

-

-

Kafka資料來源

支援

支援

支援

支援

-

支援

-

-

-

支援

KingbaseES(人大金倉)資料來源

支援

支援

-

-

-

-

-

-

-

-

Lindorm資料來源

支援

支援

-

-

-

-

-

-

-

-

LogHub(SLS)資料來源

支援

支援

支援

-

-

-

-

-

-

-

Data Lake Formation 2.0 資料來源

-

-

-

image

-

-

-

-

-

-

MaxCompute資料來源

支援

支援

-

支援

-

支援

-

支援

-

支援

MariaDB資料來源

支援

支援

-

-

-

-

-

-

-

-

Maxgraph資料來源

-

支援

-

-

-

-

-

-

-

-

Memcache(OCS)資料來源

-

支援

-

-

-

-

-

-

-

-

MetaQ資料來源

支援

-

-

-

-

-

-

-

-

-

MongoDB資料來源

支援

支援

-

-

支援

-

-

-

支援

-

MySQL資料來源

支援

支援

支援

-

支援

-

支援

-

支援

-

OpenSearch資料來源

-

支援

-

-

-

-

-

-

-

-

Oracle資料來源

支援

支援

-

-

-

-

支援

-

支援

-

OSS資料來源

支援

支援

-

支援

-

支援

-

支援

-

-

OSS-HDFS資料來源

支援

支援

-

支援

-

支援

-

-

-

-

PolarDB資料來源

支援

支援

支援

-

支援

-

支援

-

支援

-

PolarDB-X 2.0資料來源

支援

支援

-

-

-

-

支援

-

支援

-

PostgreSQL資料來源

支援

支援

-

-

-

-

支援

-

支援

-

Redis資料來源

-

支援

-

-

-

-

-

-

-

-

RestAPI(HTTP形式)資料來源

支援

支援

-

-

-

-

-

-

-

-

Salesforce資料來源

支援

-

-

-

-

-

-

-

-

-

SAP HANA資料來源

支援

支援

-

-

-

-

-

-

-

-

StarRocks資料來源

支援

支援

-

-

-

支援

-

支援

-

-

SQL Server資料來源

支援

支援

-

-

-

-

支援

-

-

-

Tablestore資料來源

支援

支援

-

-

-

-

-

-

-

-

Tablestore Stream資料來源

支援

-

-

-

-

-

-

-

-

-

TSDB資料來源

-

支援

-

-

-

-

-

-

-

-

Vertica

支援

支援

-

-

-

-

-

-

-

-