本文为您介绍E-MapReduce(简称EMR)的Presto提供的内置连接器,以及如何修改和添加连接器等操作。
EMR Presto内置连接器
EMR Presto默认提供以下几种开箱即用的内置连接器。
连接器 | 功能 |
hive | 使用Hive连接器可以查询存储在Hive数据仓库中的数据。 |
kudu | 使用Kudu连接器可以查询、插入和删除存储在Kudu里的数据。 |
mysql | 使用MySQL连接器可以在外部MySQL实例中查询和创建表。 |
iceberg | 使用Iceberg连接器可以查询Iceberg格式的数据文件。 |
hudi | 使用Hudi连接器可以查询COW和MOR表。 |
delta | 使用Delta连接器可以查询Delta Lake表。 |
jmx | 使用JMX连接器可以进行系统监控和调试。 |
system | 使用系统连接器可以查询集群的基本信息和度量。 说明 系统连接器无需配置,所有信息都可以通过名为 |
修改内置连接器
您可以在EMR控制台的Presto服务的配置页面,修改各个连接器对应的配置文件,然后重启Presto服务。连接器与配置文件对应关系如下表。
连接器名称 | 配置文件 |
hive-hadoop2 | hive.properties |
kudu | kudu.properties |
mysql | mysql.properties |
iceberg | iceberg.properties |
hudi | hudi.properties |
delta | delta.properties |
jmx | jmx.properties |
示例:修改Hive连接器
在EMR控制台的Presto服务的配置页面,在服务配置区域,单击hive.properties页签。
根据实际情况修改各配置项。
修改配置项的详细信息,请参见管理配置项。
保存完配置后,在右上角选择更多操作>重启。
重要服务重启完成后,修改的连接器才能生效。
增加自定义连接器
您可以使用EMR Presto默认提供的5个占位连接器,增加自定义连接器,分别为connector1、connector2、connector3、connector4和connector5,即EMR控制台的Presto服务的配置页面的connector1.properties、connector2.properties、connector3.properties、connector4.properties和connector5.properties。占位连接器的配置方法与内置连接器一致。
如果您需要增加自定义连接器,修改未被使用的占位连接器配置即可。
示例:增加Mongodb连接器
进入EMR on ECS控制台的Presto服务的配置页面,在服务配置区域,单击connector1.properties页签。
修改connector.name的值为mongodb。
根据实际情况添加自定义配置项。
添加配置项的详细信息,请参见修改配置项。
保存完配置后,在右上角选择更多操作>重启。