全部产品
Search
文档中心

数据湖构建:数据源管理

更新时间:Nov 07, 2023

数据源管理是管理入湖数据来源的入口,支持RDS MySQL,Kafka作为数据湖的来源。您可以新建、编辑和删除数据源。

重要

数据入湖功能已经停止更新,如果您有数据入湖需求请参考:数据入湖停止更新公告

控制台-用户指南

创建数据源

  1. 连接属性配置。

    1. 连接名称:请输入你要建立的数据源名称。

    2. 连接类型:支持数据库与Kafka两种类型。

    3. 数据库引擎

      1. 连接类型为数据库时,支持MySQL引擎。

      2. 连接类型为Kafka时,支持阿里云消息队列Kafka,EMR Kafka,自建Kafka。

    4. 实例类型:当连接类型为数据库时,支持RDS实例,PolarDB实例。

  2. 访问设置

    1. 连接类型为数据库时:

      1. 实例类型:可选择当前阿里云账号下的RDS,其他阿里云账号的RDS。

      2. RDS实例:选择具体的RDS实例ID。

      3. JDBC连接地址:输入JDBC的连接地址,如127.0.0.1。

      4. JDBC连接端口:输入JDBC的连接端口,如3060。

      5. 用户名:连接RDS所需的用户名。

      6. 密码:连接RDS所需的密码。

      7. VPC:RDS所在账号的VPC ID。

      8. VSwitch:RDS所在账号的交换机 VSwitch ID。

      9. Security Group:RDS所在账号的安全组ID。

    2. 连接类型为Kafka时:

      1. 消息队列Kafka实例:选择具体的阿里云Kafka实例。

      2. EMR Kafka集群:选择具体的EMR Kafka集群。

      3. ECS自建Kafka集群:选择具体的自建Kafka的ECS机器ID。

      4. Kafka Bootstrap Server:格式如:host1:port1,host2:port2。

      5. 用户名:连接Kafka所需的用户名。

      6. 密码:连接Kafka所需的密码。

      7. VPC:Kafka所在账号的VPC ID。

      8. VSwitch:Kafka所在账号的交换机 VSwitch ID。

      9. Security Group:Kafka所在账号的安全组ID。

      10. 是否SSL认证:开启或关闭。

删除数据源

1. 进入数据源管理页面。

2. 找到需要删除的数据源, 点击右侧的“删除”按钮,在弹出框中点击“确认”。

删除数据源