Elastic Compute Service：巨量資料型執行個體規格（d系列）

巨量資料執行個體具有以下特點：

• 基於企業級架構提供穩定計算能力，為高效處理計算作業提供保障。

• 網路效能更高（包括單一實例最大內網頻寬和最大小包轉寄率），滿足業務高峰期執行個體間的資料互動需求，例如MapReduce計算架構下的Shuffle過程。

• 單磁碟順序讀寫效能達190 MB/s（首次建立執行個體時，磁碟需要預熱才能達到最高效能），儲存單一版本吞吐能力最大5 GB/s，縮短HDFS檔案讀取和寫入時間。

• 本機存放區價格比SSD雲端硬碟降低97%，大大降低Hadoop叢集建設成本。

使用巨量資料執行個體時請注意：

• 不支援變更配置和宕機遷移。

• 本地碟與特定規格的執行個體相綁定，本地碟的數量和容量由您選擇的執行個體規格決定。不支援單獨購買本地碟，不支援將本地碟卸載並掛載到另一台執行個體上使用。

• 本地碟不支援快照功能。如果您需要為本地碟執行個體建立包含系統硬碟和資料盤的鏡像，建議通過組合系統硬碟快照和資料盤（僅限雲端硬碟）快照的方式來建立。

• 不支援基於執行個體ID建立包含系統硬碟和資料盤的鏡像。

• 支援掛載SSD雲端硬碟，掛載的雲端硬碟支援擴容。

• 操作本地碟執行個體可能對本地碟資料產生影響，更多詳情，請參見執行個體操作對本地碟資料的影響。

使用ext4等檔案系統，首次執行mount操作時需要初始化inode table。在Linux的2.6.37及更高的核心版本中，預設啟用了lazyinit特性，導致inode table初始化會延遲到mount後，且本地碟在初始化時會佔用較大輸送量（例如30個本地碟的輸送量可能高達600 MB/s），影響業務穩定性。4.x版本核心中增加了lazyinit並發度，可以緩解該問題，詳情請參見社區。ECS推薦以下最佳實務，使您在相對較快的時間內完成初始化：

1. 擷取所有SATA HDD本地碟列表。

2. 運行以下命令，為每個本地碟開啟獨立的後台初始化。

   本樣本中，在裝置名稱為/dev/vdb的本地碟上建立ext4檔案系統。

   mkfs.ext4 -E lazy_itable_init=0,lazy_journal_init=0 /dev/vdb &

3. 等待所有本地碟完成初始化，並運行iostat -x 5，直至所有本地碟的I/O活動顯示為0。

4. 批量執行mount操作。

d3s的特點如下：

• 執行個體配備12 TB大容量、高吞吐SATA HDD本地碟，輔以最大64 Gbit/s執行個體間網路頻寬

• 支援線上更換壞盤，支援熱插拔壞盤，避免導致執行個體停機

  如果單塊本地碟出現故障，您會收到系統事件，確認響應事件即可發起壞盤修複流程，更多說明請參見本地碟執行個體營運情境和系統事件。

  重要

  確認發起壞盤修複流程後，壞盤中的資料不可恢複。

• 計算：

  • 處理器：2.7 GHz主頻的 ^® Xeon ^® 可擴充處理器（Ice Lake），全核睿頻3.5 GHz，計算效能穩定

• 儲存：

  • I/O最佳化執行個體

  • 僅支援ESSD雲端硬碟和ESSD AutoPL雲端硬碟

• 網路：

  • 支援IPv6

  • 執行個體網路效能與計算規格對應（規格越高網路效能越強）

• 適用情境：

  • Hadoop MapReduce、HDFS、Hive、Hbase等巨量資料計算和儲存業務情境

  • Spark記憶體計算、MLlib等機器學習情境

  • Elasticsearch、Kafka等搜尋和日誌資料處理情境

d3s包括的執行個體規格及指標資料如下表所示。

d3c的特點如下：

• 執行個體配備大容量、高吞吐本地碟，輔以最大40 Gbit/s執行個體間網路頻寬

• 支援線上更換壞盤，支援熱插拔壞盤，避免導致執行個體停機

  如果單塊本地碟出現故障，您會收到系統事件，確認響應事件即可發起壞盤修複流程，更多說明請參見本地碟執行個體營運情境和系統事件。

  重要

  確認發起壞盤修複流程後，壞盤中的資料不可恢複。

• 計算：

  • 處理器：採用第三代Intel ^® Xeon ^® 可擴充處理器（Ice Lake），主頻2.9 GHz，全核睿頻3.5 GHz，計算效能穩定

• 儲存：

  • I/O最佳化執行個體

  • 僅支援ESSD雲端硬碟和ESSD AutoPL雲端硬碟

• 網路：

  • 支援IPv6

  • 執行個體網路效能與計算規格對應（規格越高網路效能越強）

• 適用情境：

  • Hadoop MapReduce、HDFS、Hive、Hbase等巨量資料計算和儲存業務情境

  • EMR JindoFS配合OSS實現巨量資料冷熱資料分層和儲存計算分離的情境

  • Spark記憶體計算、MLlib等機器學習情境

  • Elasticsearch、Kafka等搜尋和日誌資料處理情境

d3c包括的執行個體規格及指標資料如下表所示。

d2c的特點如下：

• 執行個體配備大容量、高吞吐SATA HDD本地碟，輔以最大35 Gbit/s執行個體間網路頻寬

• 支援線上更換壞盤，支援熱插拔壞盤，避免導致執行個體停機

  如果單塊本地碟出現故障，您會收到系統事件，確認響應事件即可發起壞盤修複流程，更多說明請參見本地碟執行個體營運情境和系統事件。

  重要

  確認發起壞盤修複流程後，壞盤中的資料不可恢複。

• 計算：

  • 處理器：2.5 GHz主頻的Intel ^® Xeon ^® Platinum 8269CY（Cascade Lake）

• 儲存：

  • I/O最佳化執行個體

  • 僅支援ESSD雲端硬碟、ESSD AutoPL雲端硬碟、SSD雲端硬碟和高效雲端硬碟

• 網路：

  • 支援IPv6

  • 執行個體網路效能與計算規格對應（規格越高網路效能越強）

• 適用情境：

  • Hadoop MapReduce、HDFS、Hive、Hbase等巨量資料計算和儲存業務情境

  • EMR JindoFS配合OOS實現巨量資料冷熱資料分層和儲存計算分離的情境

  • Spark記憶體計算、MLlib等機器學習情境

  • Elasticsearch、Kafka等搜尋和日誌資料處理情境

d2c包括的執行個體規格及指標資料如下表所示。

d2s的特點如下：

• 執行個體配備大容量、高吞吐SATA HDD本地碟，輔以最大35 Gbit/s執行個體間網路頻寬

• 支援線上更換壞盤，支援熱插拔壞盤，避免導致執行個體停機

  如果單塊本地碟出現故障，您會收到系統事件，確認響應事件即可發起壞盤修複流程，更多說明請參見本地碟執行個體營運情境和系統事件。

  重要

  確認發起壞盤修複流程後，壞盤中的資料不可恢複。

• 計算：

  • 處理器：2.5 GHz主頻的Intel ^® Xeon ^® Platinum 8163（Skylake）

• 儲存：

  • I/O最佳化執行個體

  • 僅支援ESSD雲端硬碟、ESSD AutoPL雲端硬碟、SSD雲端硬碟和高效雲端硬碟

• 網路：

  • 支援IPv6

  • 執行個體網路效能與計算規格對應（規格越高網路效能越強）

• 適用情境：

  • Hadoop MapReduce、HDFS、Hive、Hbase等巨量資料計算和儲存業務情境

  • Spark記憶體計算、MLlib等機器學習情境

  • Elasticsearch、Kafka等搜尋和日誌資料處理情境

d2s包括的執行個體規格及指標資料如下表所示。

d1ne的特點如下：

• 執行個體配備大容量、高吞吐SATA HDD本地碟，輔以最大35 Gbit/s執行個體間網路頻寬

• 計算：

  • 處理器與記憶體配比為1:4，為巨量資料情境設計

  • 處理器：2.5 GHz主頻的Intel ^® Xeon ^® E5-2682 v4（Broadwell）

• 儲存：

  • I/O最佳化執行個體

  • 僅支援SSD雲端硬碟和高效雲端硬碟

• 網路：

  • 支援IPv6

  • 執行個體網路效能與計算規格對應（規格越高網路效能越強）

• 適用情境：

  • Hadoop MapReduce、HDFS、Hive、HBase等

  • Spark記憶體計算、MLlib等

  • Elasticsearch、日誌等

d1ne包括的執行個體規格及指標資料如下表所示。

d1的特點如下：

• 執行個體配備大容量、高吞吐SATA HDD本地碟，輔以最大17 Gbit/s執行個體間網路頻寬

• 計算：

  • 處理器與記憶體配比為1:4，為巨量資料情境設計

  • 處理器：2.5 GHz主頻的Intel ^® Xeon ^® E5-2682 v4（Broadwell）

• 儲存：

  • I/O最佳化執行個體

  • 僅支援SSD雲端硬碟和高效雲端硬碟

• 網路：

  • 執行個體網路效能與計算規格對應（規格越高網路效能越強）

• 適用情境：

  • Hadoop MapReduce、HDFS、Hive、HBase等

  • Spark記憶體計算、MLlib等

  • 互連網行業、金融行業等有巨量資料計算與儲存分析需求的行業客戶，進行海量資料存放區和計算的業務情境

  • Elasticsearch、日誌等

d1包括的執行個體規格及指標資料如下表所示。