云服务器 ECS：大数据型实例规格（d系列）

大数据实例具有以下特点：

• 基于企业级架构提供稳定计算能力，为高效处理计算作业提供保障。

• 网络性能更高（包括单实例最大内网带宽和最大小包转发率），满足业务高峰期实例间的数据交互需求，例如MapReduce计算框架下的Shuffle过程。

使用大数据实例时请注意：

• 不支持变配。

• 本地盘与特定规格的实例相绑定，本地盘的数量和容量由您选择的实例规格决定。不支持单独购买本地盘，不支持将本地盘卸载并挂载到另一台实例上使用。

• 本地盘不支持快照功能。如果您需要为本地盘实例创建包含系统盘和数据盘的镜像，建议通过组合系统盘快照和数据盘（仅限云盘）快照的方式来创建。

• 不支持基于实例ID创建包含系统盘和数据盘的镜像。

• 支持挂载SSD云盘，挂载的云盘支持扩容。

• 操作本地盘实例可能对本地盘数据产生影响，更多详情，请参见实例操作对本地盘数据的影响。

使用ext4等文件系统，首次执行mount操作时需要初始化inode table。在Linux的2.6.37及更高的内核版本中，默认启用了lazyinit特性，导致inode table初始化会延迟到mount后，且本地盘在初始化时会占用较大吞吐量（例如30个本地盘的吞吐量可能高达600 MB/s），影响业务稳定性。4.x版本内核中增加了lazyinit并发度，可以缓解该问题，详情请参见社区。ECS推荐以下最佳实践，使您在相对较快的时间内完成初始化：

1. 获取所有SATA HDD本地盘列表。

2. 运行以下命令，为每个本地盘开启独立的后台初始化。

   本示例中，在设备名为/dev/vdb的本地盘上创建ext4文件系统。

   mkfs.ext4 -E lazy_itable_init=0,lazy_journal_init=0 /dev/vdb &

3. 等待所有本地盘完成初始化，并运行iostat -x 5，直至所有本地盘的I/O活动显示为0。

4. 批量执行mount操作。

• 规格族介绍：实例配备12 TB大容量、高吞吐SATA HDD本地盘，辅以最大64 Gbit/s实例间网络带宽。

• 适用场景：

  • Hadoop MapReduce、HDFS、Hive、HBase等大数据计算和存储业务场景。

  • Spark内存计算、MLlib等机器学习场景。

  • ElasticSearch、Kafka等搜索和日志数据处理场景。

• 支持在线更换坏盘，支持热插拔坏盘，避免导致实例停机。

  如果单块本地盘出现故障，您会收到系统事件，确认响应事件即可发起坏盘修复流程，更多说明请参见本地盘实例运维场景和系统事件。

  重要

  确认发起坏盘修复流程后，坏盘中的数据不可恢复。

• 计算：

  • 处理器：2.7 GHz主频的 ^® Xeon ^® 可扩展处理器（Ice Lake），全核睿频3.5 GHz，计算性能稳定。

• 存储：

  • I/O优化实例。

  • 支持的云盘类型：ESSD云盘和ESSD AutoPL云盘。

• 网络：

  • 支持IPv4、IPv6。关于IPv6通信，参见IPv6通信。

  • 实例网络性能与实例规格对应，规格越高网络性能越强。

d3s包括的实例规格及指标数据如下表所示：

d3c的特点如下：

• 规格族介绍：实例配备大容量、高吞吐本地盘，辅以最大40 Gbit/s实例间网络带宽。

• 适用场景：

  • Hadoop MapReduce、HDFS、Hive、HBase等大数据计算和存储业务场景。

  • EMR JindoFS配合OSS实现大数据冷热数据分层和存储计算分离的场景。

  • Spark内存计算、MLlib等机器学习场景。

  • ElasticSearch、Kafka等搜索和日志数据处理场景。

• 支持在线更换坏盘，支持热插拔坏盘，避免导致实例停机。

  如果单块本地盘出现故障，您会收到系统事件，确认响应事件即可发起坏盘修复流程，更多说明请参见本地盘实例运维场景和系统事件。

  重要

  确认发起坏盘修复流程后，坏盘中的数据不可恢复。

• 计算：

  • 处理器：采用第三代Intel ^® Xeon ^® 可扩展处理器（Ice Lake），主频2.9 GHz，全核睿频3.5 GHz，计算性能稳定。

• 存储：

  • I/O优化实例。

  • 支持的云盘类型：ESSD云盘和ESSD AutoPL云盘。

• 网络：

  • 支持IPv4、IPv6。关于IPv6通信，参见IPv6通信。

  • 实例网络性能与实例规格对应，规格越高网络性能越强。

d3c包括的实例规格及指标数据如下表所示：

• 规格族介绍：实例配备大容量、高吞吐SATA HDD本地盘，辅以最大35 Gbit/s实例间网络带宽。

• 适用场景：

  • Hadoop MapReduce、HDFS、Hive、Hbase等大数据计算和存储业务场景。

  • EMR JindoFS配合OOS实现大数据冷热数据分层和存储计算分离的场景。

  • Spark内存计算、MLlib等机器学习场景。

  • ElasticSearch、Kafka等搜索和日志数据处理场景。

• 支持在线更换坏盘，支持热插拔坏盘，避免导致实例停机。

  如果单块本地盘出现故障，您会收到系统事件，确认响应事件即可发起坏盘修复流程，更多说明请参见本地盘实例运维场景和系统事件。

  重要

  确认发起坏盘修复流程后，坏盘中的数据不可恢复。

• 计算：

  • 处理器：2.5 GHz主频的Intel ^® Xeon ^® Platinum 8269CY（Cascade Lake）。

• 存储：

  • I/O优化实例。

  • 支持的云盘类型：ESSD云盘、ESSD AutoPL云盘、SSD云盘和高效云盘。

• 网络：

  • 支持IPv4、IPv6。关于IPv6通信，参见IPv6通信。

  • 实例网络性能与实例规格对应，规格越高网络性能越强。

d2c包括的实例规格及指标数据如下表所示：

• 规格族介绍：实例配备大容量、高吞吐SATA HDD本地盘，辅以最大35 Gbit/s实例间网络带宽。

• 适用场景：

  • Hadoop MapReduce、HDFS、Hive、Hbase等大数据计算和存储业务场景。

  • Spark内存计算、MLlib等机器学习场景。

  • ElasticSearch、Kafka等搜索和日志数据处理场景。

• 支持在线更换坏盘，支持热插拔坏盘，避免导致实例停机。

  如果单块本地盘出现故障，您会收到系统事件，确认响应事件即可发起坏盘修复流程，更多说明请参见本地盘实例运维场景和系统事件。

  重要

  确认发起坏盘修复流程后，坏盘中的数据不可恢复。

• 计算：

  • 处理器：2.5 GHz主频的Intel ^® Xeon ^® Platinum 8163（Skylake）。

• 存储：

  • I/O优化实例。

  • 支持的云盘类型：ESSD云盘、ESSD AutoPL云盘、SSD云盘和高效云盘。

• 网络：

  • 支持IPv4、IPv6。关于IPv6通信，参见IPv6通信。

  • 实例网络性能与实例规格对应，规格越高网络性能越强。

d2s包括的实例规格及指标数据如下表所示：

• 规格族介绍：实例配备大容量、高吞吐SATA HDD本地盘，辅以最大35 Gbit/s实例间网络带宽。

• 适用场景：

  • Hadoop MapReduce、HDFS、Hive、HBase等。

  • Spark内存计算、MLlib等。

  • ElasticSearch、日志等。

• 计算：

  • 处理器与内存配比为1:4，为大数据场景设计。

  • 处理器：2.5 GHz主频的Intel ^® Xeon ^® E5-2682 v4（Broadwell）。

• 存储：

  • I/O优化实例。

  • 支持的云盘类型：SSD云盘和高效云盘。

• 网络：

  • 支持IPv4、IPv6。关于IPv6通信，参见IPv6通信。

  • 实例网络性能与实例规格对应，规格越高网络性能越强。

d1ne包括的实例规格及指标数据如下表所示：

• 规格族介绍：实例配备大容量、高吞吐SATA HDD本地盘，辅以最大17 Gbit/s实例间网络带宽。

• 适用场景：

  • Hadoop MapReduce、HDFS、Hive、HBase等。

  • Spark内存计算、MLlib等。

  • 互联网行业、金融行业等有大数据计算与存储分析需求的行业客户，进行海量数据存储和计算的业务场景。

  • ElasticSearch、日志等。

• 计算：

  • 处理器与内存配比为1:4，为大数据场景设计。

  • 处理器：2.5 GHz主频的Intel ^® Xeon ^® E5-2682 v4（Broadwell）。

• 存储：

  • I/O优化实例。

  • 支持的云盘类型：SSD云盘和高效云盘。

• 网络：

  • 仅支持IPv4。

  • 实例网络性能与实例规格对应，规格越高网络性能越强。

d1包括的实例规格及指标数据如下表所示：