全部产品
Search
文档中心

开源大数据平台E-MapReduce:扩容集群

更新时间:Jul 08, 2024

当E-MapReduce集群计算资源或存储资源不足时,您可以通过水平扩展Core节点和Task节点来满足需求。

前提条件

已创建集群,详情请参见创建集群

使用限制

  • 不支持扩容Master节点组,只能扩展Core节点和Task节点,且新扩展节点的配置默认与已有节点一致。

  • Hadoop集群类型中通过弹性伸缩模块创建的弹性伸缩组(创建详情请参见配置弹性伸缩(仅Hadoop集群类型)),无法进行该操作。

注意事项

如果您的集群中包含StarRocks服务,且StarRocks服务执行过手动升级,则后续的扩容操作有可能引发集群版本不一致问题。为确保系统稳定运行,我们强烈建议您迁移到EMR Serverless StarRocks。

EMR Serverless StarRocks不仅无缝兼容开源StarRocks,并且具备自动升级软件版本的功能,可省去手动管理版本的繁琐与风险。

操作步骤

重要

集群扩容操作不会重启存量节点上的应用进程。

  1. 进入节点管理页面。

    1. 登录E-MapReduce控制台

    2. 在顶部菜单栏处,根据实际情况选择地域和资源组

    3. 单击目标集群操作列的节点管理

  2. 节点管理页面,单击目标节点组操作列的扩容

  3. 扩容对话框中,根据实际情况修改相应参数。

    配置项

    说明

    节点组名称

    当前节点组的名称。

    节点类型

    当前节点组的类型。

    当前配置

    当前节点组中的实例信息。

    付费类型

    当前集群的付费类型。新增节点的付费类型继承集群的付费类型,不可更改。

    如果是包年包月类型,您可以配置是否自动续费,并设置新增节点的付费时长

    说明

    开启自动续费后,新扩容的包年包月节点将在到期前7天自动进行续费,默认续期时长为1个月。后续您可以在自动续费配置中调整续费功能的开启状态及具体续期时长。

    交换机

    当前节点组的交换机信息。

    当前数量

    当前节点组中实例的数量。

    增加数量

    单击调整框的上下箭头或直接在调整框中输入数字,设置需要增加当前节点组实例的数量。

    集群到期时间

    包年包月类型集群的到期时间。

    服务协议

    阅读并同意服务条款后,选中即可。

  4. 完成上述参数配置后,单击确定

    登录新扩容节点的具体操作,请参见登录集群

后续操作

当您扩容的节点组为Core节点组,且使用本地HDFS作为存储时,如果在扩容流程结束后发现HDFS出现数据不平衡的情况,请使用HDFS Balancer重新分配DataNode中的数据,详情请参见HDFS Balancer

相关文档