全部产品
Search
文档中心

开源大数据平台E-MapReduce:新增服务

更新时间:Mar 12, 2024

E-MapReduce支持在集群成功创建后,新增未安装的服务。本文为您介绍如何在E-MapReduce控制台上新增服务。

前提条件

已创建集群,且集群状态为运行中。创建集群的具体操作,请参见创建集群

使用限制

  • 集群状态为运行中。

  • 集群内所有节点状态均为运行中,且无异常服务。

  • 仅以下集群场景支持新增服务。

    说明
    • 如果创建集群时打开了Kerberos身份认证开关,则集群创建后不支持新增Knox和Kudu服务。

    • 因为各版本的服务有差异,所以具体待添加的服务请以控制台界面显示为准。

    集群场景

    支持新增的服务

    DataLake(EMR-3.43.0、EMR-5.9.0及更高版本)

    • Knox(依赖OpenLDAP)

    • OpenLDAP

    • Ranger(依赖 Ranger-plugin, Hadoop-Common)

    • Iceberg

    • Hudi

    • JindoData(EMR-5.15.x之前版本,EMR-3.49.x之前版本)

    • JindoCache(EMR-5.15.x及之后版本,EMR-3.49.x及之后版本)

    • Presto/Trino(依赖Hadoop-Common)

    • DLF-Auth

    • Tez(依赖YARN)

    • Flume(依赖Hadoop-Common)

    • RSS/Celeborn

    • Sqoop(依赖YARN)

    • Kyuubi(依赖Spark3,Zookeeper)

    • Paimon

    • Zookeeper

    DataFlow(EMR-3.43.0、EMR-5.9.0及更高版本)

    • Flink(依赖YARN,OpenLDAP)

    • OpenLDAP

    • Knox(依赖OpenLDAP)

    • Paimon

    • Zookeeper

    DataServing(EMR-3.43.0、EMR-5.9.0及更高版本)

    • HBase(依赖Zookeeper,HDFS或OSS-HDFS)

    • Phoenix(依赖HBase)

    • JindoData(EMR-5.15.x之前版本,EMR-3.49.x之前版本)

    • JindoCache(EMR-5.15.x及之后版本,EMR-3.49.x及之后版本)

    OLAP(EMR-3.43.0、EMR-5.9.0及更高版本)

    不支持新增服务

    Custom(EMR-3.43.0、EMR-5.9.0及更高版本)

    • Knox(依赖OpenLDAP)

    • OpenLDAP

    • Ranger(依赖 Ranger-plugin, Hadoop-Common)

    • Iceberg

    • Hudi

    • JindoData(EMR-5.15.x之前版本,EMR-3.49.x之前版本)

    • JindoCache(EMR-5.15.x及之后版本,EMR-3.49.x及之后版本)

    • Presto(依赖Hadoop-Common)

    • DLF-Auth

    • Tez(依赖YARN)

    • Flume(依赖 Hadoop-Common)

    • RSS/Celeborn

    • Flink(依赖YARN,OpenLDAP)

    • HBase(依赖Zookeeper,HDFS或OSS-HDFS)

    • Phoenix(依赖HBase)

    Hadoop

    • Impala

    • Presto

    • Oozie

    • Zookeeper

    • HBase

    • Zeppelin

    • Storm

    • Ranger

    • Superset

    • Livy

    • Flume

    • Kudu

    • ESS或RSS

注意事项

新增服务后,因为部分服务需要手动修改配置并进行重启,所以请在业务低峰期进行新增服务操作。

操作步骤

  1. 进入集群服务页面。

    1. 登录E-MapReduce控制台

    2. 在顶部菜单栏处,根据实际情况选择地域和资源组

    3. 在EMR on ECS页面,单击目标集群操作列的集群服务

  2. 集群服务页签,单击新增服务

  3. 新增服务面板,选择待添加的服务,单击确定

    说明

    部分服务在新增后需要对所依赖的服务配置进行更改。选择待添加的服务单击确定后,系统会提醒您需要修改的依赖服务。请仔细查看提示信息,单击我已知晓,继续,然后参照下一步骤修改依赖的服务配置。

    服务新增成功后,系统提示新增服务成功,您可以在当前页面查看新增的服务。

  4. 可选:修改服务配置。

    例如,本示例是在新增DeltaLake服务结束后,需要分别前往Hive和Spark3服务的配置页面修改配置信息。add

    1. 集群服务页面,分别单击Hive和Spark3服务区域的配置

      configure

    2. 单击提示信息区域的配置修改

      Modify Configuration

    3. 配置修改面板,勾选所有配置项,单击保存

      Save

    4. 重启Hive和Spark3服务,或者通过提示灯方式使配置生效。

      image.png

      重启服务的具体操作,请参见重启服务

相关文档