云原生数据仓库AnalyticDB：通过无感集成（Zero-ETL）同步数据

创建AnalyticDB for MySQL服务关联角色

1. 前往RAM控制台的角色列表。

2. 检查角色列表中，是否已存在名为AliyunServiceRoleForAnalyticDBForMySQL的服务关联角色。若不存在，则需创建相关角色。

3. 单击左侧创建角色。

4. 在弹出的创建角色对话框中，选择阿里云服务，并单击下一步。

5. 选择角色类型为服务关联角色，并选择AnalyticDB for MySQL。

6. 单击完成，返回角色列表，确保已成功创建服务关联角色。

授予RAM用户管理权限

RAM用户创建和管理Zero-ETL链路需要下列两种权限。

授予RAM用户AnalyticDB for MySQL管理权限

RAM用户必须拥有AnalyticDB for MySQL的管理权限AliyunADBFullAccess，才可以创建和管理AnalyticDB for MySQL的Zero-ETL链路。操作步骤，请参见为RAM用户授权。

授予RAM用户Zero-ETL管理权限

RAM用户需要具备为数据源实例与目标实例（AnalyticDB for MySQL）创建链路的权限，才能创建和管理Zero-ETL链路。您可以自定义权限策略，允许为数据源和AnalyticDB for MySQL的所有实例创建链路或仅为指定实例创建链路，并将自定义权限策略授权给RAM用户。创建自定义权限策略与RAM用户授权的操作，请参见创建自定义权限策略。

自定义权限策略的脚本如下：

{
    "Version": "1",
    "Statement": [
        {
            "Effect": "Allow",
            "Action": "dts:*",
            "Resource": [
                "acs:adb:*:*:*",
                "acs:polardb:*:*:*"
            ]
        },
        {
            "Effect": "Allow",
            "Action": [
                "dts:DescribeRegions",
                "dts:DescribeConfigRelations",
                "dts:DescribeSrcLinkConfig",
                "dts:DescribeDestLinkConfig",
                "dts:DescribeLinkConfig"
            ],
            "Resource": [
                "acs:dts:*:*:*"
            ]
        }
    ]
}

{
    "Version": "1",
    "Statement": [
        {
            "Effect": "Allow",
            "Action": "dts:*",
            "Resource": [
                "acs:adb:*:*:dbcluster/am-2zeod8ax4b9a****",
                "acs:polardb:*:*:dbcluster/pc-bp13jqn4a26b0****"
            ]
        },
        {
            "Effect": "Allow",
            "Action": [
                "dts:DescribeRegions",
                "dts:DescribeConfigRelations",
                "dts:DescribeSrcLinkConfig",
                "dts:DescribeDestLinkConfig",
                "dts:DescribeLinkConfig"
            ],
            "Resource": "acs:dts:*:*:*"
        }
    ]
}

操作步骤

1. 登录云原生数据仓库AnalyticDB MySQL控制台，在左上角选择集群所在地域。在左侧导航栏，单击集群列表。在集群列表上方，选择产品系列，然后单击目标集群ID。

2. 进入无感集成（Zero-ETL）功能页面，不同的产品系列功能入口不同。

   • 湖仓版集群：在左侧导航栏，选择数据接入 > DB数据同步。

   • 数仓版集群：在左侧导航栏，选择数据传输服务 > 无感数据集成。

3. 单击创建Zero-ETL任务，在创建Zero-ETL任务页面配置源库信息和目标库信息。

   • 配置源库信息：

     源库信息	说明
     任务名称	Zero-ETL任务名称。
     数据库类型	选择PolarDB for MySQL。
     接入方式	仅支持云实例接入。
     实例地区	PolarDB for MySQL实例所属地域。
     实例ID	PolarDB for MySQL实例ID。
     数据库账号	PolarDB for MySQL实例的数据库账号。
     数据库密码	PolarDB for MySQL实例数据库账号的密码。
     连接方式	连接PolarDB for MySQL实例的方式。包括非加密链接和SSL安全链接。 说明 如果设置为SSL安全连接，您需要提前开启PolarDB for MySQL实例的SSL加密功能，详情请参见设置SSL加密。

   • 配置目标库信息：

     目标库信息	说明
     数据库类型	当前目标库仅支持AnalyticDB MySQL 3.0。
     接入方式	仅支持云实例接入。
     实例地区	AnalyticDB for MySQL集群所属的地域。
     实例ID	AnalyticDB for MySQL的集群ID。
     数据库账号	AnalyticDB for MySQL集群的数据库账号。
     数据库密码	AnalyticDB for MySQL集群数据库账号的密码。

4. 上述参数配置完成后，单击测试连接以进行下一步，进入配置Zero-ETL页面，配置如下参数：

   配置项目	说明
   同步类型	实现数据源之间的数据实时同步。 同步类型分为：库表结构同步、全量同步、增量同步。 说明 同步任务固定勾选增量数据同步，将源库产生的增量数据实时同步至目标库。 不需要增量同步时，请使用数据迁移功能。
   实例级别选择所需同步的DDL和DML	勾选所需同步的DML操作（insert、update和delete）和DDL操作（create、alter、drop、和truncate），默认全部勾选。
   源库对象和已选择对象	数据库中源库对象和同步对象。
   高级配置（选填）	设置源库、目标库无法连接后的重试时间和源库、目标库出现其他问题后的重试时间。

5. 上述参数配置完成后，单击配置库表字段，配置信息如下：

   库表字段配置	说明
   数据库名称	选择已有的数据库。
   表名称	选择已有的数据表。
   主键列	已选数据表中的主键所在字段。
   分布键	已选数据表中的分布键所在字段。
   类型	数据表类型，包括分区表和复制表。
   定义状态	定义完库表字段配置状态后，即从未定义变为已定义。

6. 配置完上述所有参数后，请单击下一步保存任务并预检查。

7. 预检查通过，单击启动，启动Zero-ETL任务。

   您可以在无感数据集成页面，查看目标Zero-ETL任务的名称、源/目标、运行状态等信息。

Zero-ETL任务监控与告警

创建并启动Zero-ETL任务后，您可以在云监控控制台设置Zero-ETL任务报警规则，实时监控Zero-ETL任务的运行情况。具体操作如下。