GPU计算型实例具有高性能、高并行计算能力,适用于大规模并行计算场景,可以为您的业务提供更好的计算性能和效率。本文为您介绍云服务器ECS GPU计算型实例规格族的特点,并列出了具体的实例规格。
主售(推荐类型)
在售(如果售罄,建议使用主售的规格族)
GPU计算型实例规格族gn8is
该实例目前仅支持海外等部分地域,如有需求,请联系阿里云销售人员。
gn8is特点如下:
gn8is是阿里云针对近期AI生成业务的发展推出的第8代加速计算规格族(GPU计算型实例规格族),针对不同应用需求,为您提供1卡、2卡、4卡和8卡机型,以及不同CPU和GPU配比的实例规格。
产品特色及定位
图形处理:该产品采用Intel第5代Xeon Scaleable高主频处理器,在3D建模场景中,为您提供足够的CPU算力支撑,使得图形的渲染和设计更加顺畅。
推理任务:采用全新48 GB显存的图形处理单元(GPU)来加速推理任务,支持FP8浮点数格式,搭配ACK容器可灵活支持各类AIGC模型的推理,尤其适用于70 B以下LLM模型的推理任务。
计算:
采用全新GPU计算卡
支持TensorRT等常用加速功能,支持FP8浮点数格式,提升模型推理性能
显存容量提升至48 GB,多卡情况下,支持70 B及更大模型的单机推理
支持图形处理能力,例如通过云助手方式或选择云市场镜像方式安装GRID驱动后,图形处理性能相对7代平台提升1倍
处理器:采用最新的Intel ® Xeon ®高主频处理器,全核睿频可达3.9 GHz,以应对更复杂的3D建模需求
存储:
均为I/O优化实例
支持ESSD云盘、ESSD AutoPL云盘、弹性临时盘EED(Elastic Ephemeral Disk)
网络:
支持IPv4、IPv6
支持ERI(Elastic RDMA Interface)。
说明关于ERI的使用说明,请参见在企业级实例上配置eRDMA。
适用场景:
结合云市场的GRID镜像使用GRID驱动,启动OpenGL和Direct3D图形能力,提供工作站级图形处理能力,适用于动漫、影视特效制作和渲染
结合ACK容器化管理能力,更高效、低成本地支撑AIGC图形生成和LLM大模型推理
其他通用AI识别场景、图像识别、语音识别等
gn8is包括的实例规格及指标数据如下表所示。
实例规格 | vCPU | 内存(GiB) | GPU显存 | 网络基础带宽(Gbit/s) | 弹性网卡 | 队列数量(主) | IP数量(IPv4/IPv6) | 最大支持云盘数量 | 云盘基础IOPS | 云盘基础带宽(Gbit/s) |
ecs.gn8is.2xlarge | 8 | 64 | 48GB * 1 | 8 | 4 | 8 | 15/15 | 17 | 6万 | 0.75 |
ecs.gn8is.4xlarge | 16 | 128 | 48GB * 1 | 16 | 8 | 16 | 30/30 | 17 | 12万 | 1.25 |
ecs.gn8is-2x.8xlarge | 32 | 256 | 48GB * 2 | 32 | 8 | 32 | 30/30 | 33 | 25万 | 2 |
ecs.gn8is-4x.16xlarge | 64 | 512 | 48GB * 4 | 64 | 8 | 64 | 30/30 | 33 | 45万 | 4 |
ecs.gn8is-8x.32xlarge | 128 | 1024 | 48GB * 8 | 100 | 15 | 64 | 50/50 | 65 | 90万 | 8 |
您可以前往ECS实例可购买地域,查看实例在各地域的可购情况。
指标的含义请参见实例规格指标说明。
GPU计算型实例规格族gn7e
gn7e的特点如下:
您可以根据需要选择不同数量的卡和不同CPU资源的规格,灵活适应其不同的AI业务需求。
依托第三代神龙架构,VPC和云盘网络带宽相比上一代平均提升一倍。
存储:
I/O优化实例
仅支持ESSD云盘和ESSD AutoPL云盘
网络:
支持IPv6
实例网络性能与计算规格对应(规格越高网络性能越强)
适用场景:
中小规模的AI训练业务
使用CUDA进行加速的HPC业务
对GPU处理能力或显存容量需求较高的AI推理业务
深度学习,例如图像分类、无人驾驶、语音识别等人工智能算法的训练应用
高GPU负载的科学计算,例如计算流体动力学、计算金融学、分子动力学、环境分析等
重要在使用高通信负载的AI训练业务如Transformer等模型时,务必启用NVLink进行GPU间的数据通信,否则可能由于PCIe链路大规模数据传输引起非预期的故障,导致数据受损。如不确定您使用的训练通信链路拓扑,请提交工单由阿里云技术专家为您提供技术支持。
gn7e包括的实例规格及指标数据如下表所示。
实例规格 | vCPU | 内存(GiB) | GPU显存 | 网络基础带宽(Gbit/s) | 网络收发包PPS | 多队列 | 弹性网卡 | 单网卡私有IPv4地址数 |
ecs.gn7e-c16g1.4xlarge | 16 | 125 | 80GB * 1 | 8 | 300万 | 8 | 8 | 10 |
ecs.gn7e-c16g1.8xlarge | 32 | 250 | 80GB * 2 | 16 | 600万 | 16 | 8 | 10 |
ecs.gn7e-c16g1.16xlarge | 64 | 500 | 80GB * 4 | 32 | 1200万 | 32 | 8 | 10 |
ecs.gn7e-c16g1.32xlarge | 128 | 1000 | 80GB * 8 | 64 | 2400万 | 32 | 16 | 15 |
您可以前往ECS实例可购买地域,查看实例在各地域的可购情况。
指标的含义请参见实例规格族。由于业务场景的不同,网络收发包PPS会存在明显差异。因此,我们建议您进行业务压测以了解实例的性能表现,以便选择合适的实例规格。
在云服务器ECS控制台创建gn7e实例或重启gn7e实例后,系统默认该实例的MIG(Multi-Instance GPU)功能是关闭状态。关于MIG(Multi-Instance GPU)的更多信息,请参见NVIDIA Multi-Instance GPU User Guide。
gn7e实例是否支持开启MIG功能的说明如下所示:
实例规格 | 是否支持开启MIG功能 | 说明 |
ecs.gn7e-c16g1.4xlarge | 是 | 单卡实例支持开启MIG功能。 |
ecs.gn7e-c16g1.16xlarge | 否 | 多卡实例因安全因素不支持开启MIG功能。 |
ecs.gn7e-c16g1.32xlarge | 否 |
GPU计算型实例规格族gn7i
gn7i的特点如下:
依托第三代神龙架构,提供稳定可预期的超高性能。同时通过芯片快速路径加速手段,完成存储、网络性能以及计算稳定性的数量级提升。
计算:
采用NVIDIA A10 GPU卡
创新的Ampere架构
支持RTX、TensorRT等常用加速功能
处理器:2.9 GHz主频的Intel ® Xeon ® 可扩展处理器(Ice Lake),全核睿频3.5 GHz
最大可提供752 GiB内存,相比gn6i大幅提升
存储:
I/O优化实例
仅支持ESSD云盘和ESSD AutoPL云盘
网络:
支持IPv6
实例网络性能与计算规格对应(规格越高网络性能越强)
适用场景:
配备高性能CPU、内存、GPU,可以处理更多并发AI推理任务,适用于图像识别、语音识别、行为识别业务
支持RTX功能,搭配高主频CPU,提供高性能的3D图形虚拟化能力,适用于远程图形设计、云游戏等高强度图形处理业务
gn7i包括的实例规格及指标数据如下表所示。
实例规格 | vCPU | 内存(GiB) | GPU | GPU显存 | 网络基础带宽(Gbit/s) | 网络收发包PPS | 多队列 | 弹性网卡 | 单网卡私有IPv4地址数 |
ecs.gn7i-c8g1.2xlarge | 8 | 30 | NVIDIA A10 * 1 | 24GB * 1 | 16 | 160万 | 8 | 4 | 15 |
ecs.gn7i-c16g1.4xlarge | 16 | 60 | NVIDIA A10 * 1 | 24GB * 1 | 16 | 300万 | 8 | 8 | 30 |
ecs.gn7i-c32g1.8xlarge | 32 | 188 | NVIDIA A10 * 1 | 24GB * 1 | 16 | 600万 | 12 | 8 | 30 |
ecs.gn7i-c32g1.16xlarge | 64 | 376 | NVIDIA A10 * 2 | 24GB * 2 | 32 | 1200万 | 16 | 15 | 30 |
ecs.gn7i-c32g1.32xlarge | 128 | 752 | NVIDIA A10 * 4 | 24GB * 4 | 64 | 2400万 | 32 | 15 | 30 |
ecs.gn7i-c48g1.12xlarge | 48 | 310 | NVIDIA A10 * 1 | 24GB * 1 | 16 | 900万 | 16 | 8 | 30 |
ecs.gn7i-c56g1.14xlarge | 56 | 346 | NVIDIA A10 * 1 | 24GB * 1 | 16 | 1200万 | 16 | 12 | 30 |
ecs.gn7i-2x.8xlarge | 32 | 128 | NVIDIA A10 * 2 | 24GB * 2 | 16 | 600万 | 16 | 8 | 30 |
ecs.gn7i-4x.8xlarge | 32 | 128 | NVIDIA A10 * 4 | 24GB * 4 | 16 | 600万 | 16 | 8 | 30 |
ecs.gn7i-4x.16xlarge | 64 | 256 | NVIDIA A10 * 4 | 24GB * 4 | 32 | 1200万 | 32 | 8 | 30 |
ecs.gn7i-8x.32xlarge | 128 | 512 | NVIDIA A10 * 8 | 24GB * 8 | 64 | 2400万 | 32 | 16 | 30 |
ecs.gn7i-8x.16xlarge | 64 | 256 | NVIDIA A10 * 8 | 24GB * 8 | 32 | 1200万 | 32 | 8 | 30 |
您可以前往ECS实例可购买地域,查看实例在各地域的可购情况。
ecs.gn7i-2x.8xlarge、ecs.gn7i-4x.8xlarge、ecs.gn7i-4x.16xlarge、ecs.gn7i-8x.32xlarge以及ecs.gn7i-8x.16xlarge实例规格支持更改为ecs.gn7i-c8g1.2xlarge或ecs.gn7i-c16g1.4xlarge实例规格,但不支持更改为ecs.gn7i-c32g1.8xlarge等其他实例规格。
指标的含义请参见实例规格族。由于业务场景的不同,网络收发包PPS会存在明显差异。因此,我们建议您进行业务压测以了解实例的性能表现,以便选择合适的实例规格。
GPU计算型实例规格族gn7s
gn7s的特点如下:
采用全新的Intel IceLake处理器,同时搭载Nvidia Ampere架构的NVIDIA A30 GPU卡,您可以根据需要选择不同卡数和不同CPU资源的规格,灵活适应不同的AI业务需求。
基于阿里云全新的第三代神龙架构,VPC和云盘网络带宽相比上一代平均提升一倍。
计算:
采用NVIDIA A30 GPU卡
创新的Nvidia Ampere架构
支持MIG(Multi-Instance GPU)功能、加速功能(基于第二代Tensor Cores加速),提供多种业务支持。
处理器:2.9 GHz主频的Intel ® Xeon ® 可扩展处理器(Ice Lake),全核睿频3.5 GHz
容量内存相比上一代实例规格族大幅提升
存储:仅支持ESSD云盘和ESSD AutoPL云盘
网络:
支持IPv6
实例网络性能与计算规格对应(规格越高网络性能越强)
适用场景:配备高性能CPU、内存、GPU,可以处理更多并发AI推理业务需求,适用于图像识别、语音识别、行为识别业务。
gn7s包括的实例规格及指标数据如下表所示:
实例规格 | vCPU | 内存(GiB) | GPU | GPU显存 | 网络基础带宽(Gbit/s) | 网络收发包PPS | 单网卡IPv6地址数 | 多队列 | 弹性网卡 |
ecs.gn7s-c8g1.2xlarge | 8 | 60 | NVIDIA A30 * 1 | 24GB * 1 | 16 | 600万 | 1 | 12 | 8 |
ecs.gn7s-c16g1.4xlarge | 16 | 120 | NVIDIA A30 * 1 | 24GB * 1 | 16 | 600万 | 1 | 12 | 8 |
ecs.gn7s-c32g1.8xlarge | 32 | 250 | NVIDIA A30 * 1 | 24GB * 1 | 16 | 600万 | 1 | 12 | 8 |
ecs.gn7s-c32g1.16xlarge | 64 | 500 | NVIDIA A30 * 2 | 24GB * 2 | 32 | 1200万 | 1 | 16 | 15 |
ecs.gn7s-c32g1.32xlarge | 128 | 1000 | NVIDIA A30 * 4 | 24GB * 4 | 64 | 2400万 | 1 | 32 | 15 |
ecs.gn7s-c48g1.12xlarge | 48 | 380 | NVIDIA A30 * 1 | 24GB * 1 | 16 | 600万 | 1 | 12 | 8 |
ecs.gn7s-c56g1.14xlarge | 56 | 440 | NVIDIA A30 * 1 | 24GB * 1 | 16 | 600万 | 1 | 12 | 8 |
您可以前往ECS实例可购买地域,查看实例在各地域的可购情况。
指标的含义请参见实例规格族。由于业务场景的不同,网络收发包PPS会存在明显差异。因此,我们建议您进行业务压测以了解实例的性能表现,以便选择合适的实例规格。
GPU计算型实例规格族gn7
gn7的特点如下:
存储:
I/O优化实例
仅支持ESSD云盘和ESSD AutoPL云盘
网络:
支持IPv6
实例网络性能与计算规格对应(规格越高网络性能越强)
适用场景:
深度学习,例如图像分类、无人驾驶、语音识别等人工智能算法的训练应用
高GPU负载的科学计算,例如计算流体动力学、计算金融学、分子动力学、环境分析等
gn7包括的实例规格及指标数据如下表所示。
实例规格 | vCPU | 内存(GiB) | GPU显存 | 网络基础带宽(Gbit/s) | 网络收发包PPS | 多队列 | 弹性网卡 |
ecs.gn7-c12g1.3xlarge | 12 | 94 | 40GB * 1 | 4 | 250万 | 4 | 8 |
ecs.gn7-c13g1.13xlarge | 52 | 378 | 40GB * 4 | 16 | 900万 | 16 | 8 |
ecs.gn7-c13g1.26xlarge | 104 | 756 | 40GB * 8 | 30 | 1800万 | 16 | 15 |
您可以前往ECS实例可购买地域,查看实例在各地域的可购情况。
指标的含义请参见实例规格族。由于业务场景的不同,网络收发包PPS会存在明显差异。因此,我们建议您进行业务压测以了解实例的性能表现,以便选择合适的实例规格。
在云服务器ECS控制台创建gn7实例或重启gn7实例后,系统默认该实例的MIG(Multi-Instance GPU)功能是关闭状态。关于MIG(Multi-Instance GPU)的更多信息,请参见NVIDIA Multi-Instance GPU User Guide。
gn7实例是否支持开启MIG功能的说明如下所示:
实例规格 | 是否支持开启MIG功能 | 说明 |
ecs.gn7-c12g1.3xlarge | 是 | 单卡实例支持开启MIG功能。 |
ecs.gn7-c13g1.13xlarge | 否 | 多卡实例因安全因素不支持开启MIG功能。 |
ecs.gn7-c13g1.26xlarge | 否 |
GPU计算型实例规格族gn6i
gn6i的特点如下:
计算:
GPU加速器:T4
创新的Turing架构
单GPU显存16 GB(GPU显存带宽320 GB/s)
单GPU 2560个CUDA Cores
单GPU多达320个Turing Tensor Cores
可变精度Tensor Cores支持65 TFlops FP16、130 INT8 TOPS、260 INT4 TOPS
处理器与内存配比约为1:4
处理器:2.5 GHz主频的Intel ® Xeon ® Platinum 8163(Skylake)
存储:
I/O优化实例
仅支持ESSD云盘、ESSD AutoPL云盘、SSD云盘和高效云盘
网络:
支持IPv6
实例网络性能与计算规格对应(规格越高网络性能越强)
适用场景:
AI(DL和ML)推理,适合计算机视觉、语音识别、语音合成、NLP、机器翻译、推荐系统
云游戏云端实时渲染
AR和VR的云端实时渲染
重载图形计算或图形工作站
GPU加速数据库
高性能计算
gn6i包括的实例规格及指标数据如下表所示。
实例规格 | vCPU | 内存(GiB) | GPU | GPU显存 | 网络基础带宽(Gbit/s) | 网络收发包PPS | 云盘基础IOPS | 多队列 | 弹性网卡 | 单网卡私有IPv4地址数 |
ecs.gn6i-c4g1.xlarge | 4 | 15 | NVIDIA T4 * 1 | 16GB * 1 | 4 | 50万 | 无 | 2 | 2 | 10 |
ecs.gn6i-c8g1.2xlarge | 8 | 31 | NVIDIA T4 * 1 | 16GB * 1 | 5 | 80万 | 无 | 2 | 2 | 10 |
ecs.gn6i-c16g1.4xlarge | 16 | 62 | NVIDIA T4 * 1 | 16GB * 1 | 6 | 100万 | 无 | 4 | 3 | 10 |
ecs.gn6i-c24g1.6xlarge | 24 | 93 | NVIDIA T4 * 1 | 16GB * 1 | 7.5 | 120万 | 无 | 6 | 4 | 10 |
ecs.gn6i-c40g1.10xlarge | 40 | 155 | NVIDIA T4 * 1 | 16GB * 1 | 10 | 160万 | 无 | 16 | 10 | 10 |
ecs.gn6i-c24g1.12xlarge | 48 | 186 | NVIDIA T4 * 2 | 16GB * 2 | 15 | 240万 | 无 | 12 | 6 | 10 |
ecs.gn6i-c24g1.24xlarge | 96 | 372 | NVIDIA T4 * 4 | 16GB * 4 | 30 | 480万 | 25万 | 24 | 8 | 10 |
您可以前往ECS实例可购买地域,查看实例在各地域的可购情况。
指标的含义请参见实例规格族。由于业务场景的不同,网络收发包PPS会存在明显差异。因此,我们建议您进行业务压测以了解实例的性能表现,以便选择合适的实例规格。
GPU计算型实例规格族gn6e
gn6e的特点如下:
计算:
采用NVIDIA V100(32 GB NVLink)GPU卡
GPU加速器:V100(SXM2封装)
创新的Volta架构
单GPU显存32 GB HBM2(GPU显存带宽900 GB/s)
单GPU 5120个CUDA Cores
单GPU 640个Tensor Cores
单GPU支持6个NVLink链路(NVLink属于双向链路),单向链路的带宽为25 Git/s,总带宽为6×25×2=300 Git/s
处理器与内存配比约为1:8
处理器:2.5 GHz主频的Intel ® Xeon ® Platinum 8163(Skylake)
存储:
I/O优化实例
仅支持ESSD云盘、ESSD AutoPL云盘、SSD云盘和高效云盘
网络:
支持IPv6
实例网络性能与计算规格对应(规格越高网络性能越强)
适用场景:
深度学习,例如图像分类、无人驾驶、语音识别等人工智能算法的训练、推理应用
科学计算,例如计算流体动力学、计算金融学、分子动力学、环境分析等
gn6e包括的实例规格及指标数据如下表所示。
实例规格 | vCPU | 内存(GiB) | GPU | GPU显存 | 网络基础带宽(Gbit/s) | 网络收发包PPS | 多队列 | 弹性网卡 | 单网卡私有IPv4地址数 |
ecs.gn6e-c12g1.3xlarge | 12 | 92 | NVIDIA V100 * 1 | 32GB * 1 | 5 | 80万 | 8 | 6 | 10 |
ecs.gn6e-c12g1.12xlarge | 48 | 368 | NVIDIA V100 * 4 | 32GB * 4 | 16 | 240万 | 8 | 8 | 20 |
ecs.gn6e-c12g1.24xlarge | 96 | 736 | NVIDIA V100 * 8 | 32GB * 8 | 32 | 480万 | 16 | 8 | 20 |
您可以前往ECS实例可购买地域,查看实例在各地域的可购情况。
指标的含义请参见实例规格族。由于业务场景的不同,网络收发包PPS会存在明显差异。因此,我们建议您进行业务压测以了解实例的性能表现,以便选择合适的实例规格。
GPU计算型实例规格族gn6v
gn6v的特点如下:
计算:
采用NVIDIA V100 GPU卡
GPU加速器:V100(SXM2封装)
创新的Volta架构
单GPU显存16 GB HBM2(GPU显存带宽900 GB/s)
单GPU 5120个CUDA Cores
单GPU 640个Tensor Cores
单GPU支持6个NVLink链路(NVLink属于双向链路),单向链路的带宽为25 Git/s,总带宽为6×25×2=300 Git/s
处理器与内存配比约为1:4
处理器:2.5 GHz主频的Intel ® Xeon ® Platinum 8163(Skylake)
存储:
I/O优化实例
仅支持ESSD云盘、ESSD AutoPL云盘、SSD云盘和高效云盘
网络:
支持IPv6
实例网络性能与计算规格对应(规格越高网络性能越强)
适用场景:
深度学习,例如图像分类、无人驾驶、语音识别等人工智能算法的训练、推理应用
科学计算,例如计算流体动力学、计算金融学、分子动力学、环境分析等
gn6v包括的实例规格及指标数据如下表所示。
实例规格 | vCPU | 内存(GiB) | GPU | GPU显存 | 网络基础带宽(Gbit/s) | 网络收发包PPS | 云盘基础IOPS | 多队列 | 弹性网卡 | 单网卡私有IPv4地址数 |
ecs.gn6v-c8g1.2xlarge | 8 | 32 | NVIDIA V100 * 1 | 16GB * 1 | 2.5 | 80万 | 无 | 4 | 4 | 10 |
ecs.gn6v-c8g1.8xlarge | 32 | 128 | NVIDIA V100 * 4 | 16GB * 4 | 10 | 200万 | 无 | 8 | 8 | 20 |
ecs.gn6v-c8g1.16xlarge | 64 | 256 | NVIDIA V100 * 8 | 16GB * 8 | 20 | 250万 | 无 | 16 | 8 | 20 |
ecs.gn6v-c10g1.20xlarge | 82 | 336 | NVIDIA V100 * 8 | 16GB * 8 | 32 | 450万 | 25万 | 16 | 8 | 20 |
您可以前往ECS实例可购买地域,查看实例在各地域的可购情况。
指标的含义请参见实例规格指标说明。
GPU计算型弹性裸金属服务器实例规格族ebmgn8is
该实例目前仅支持海外等部分地域,如有需求,请联系阿里云销售人员。
ebmgn8is特点如下:
ebmgn8is是阿里云针对近期AI生成业务的发展推出的第8代加速计算规格族(弹性裸金属实例规格族),每个实例为一台采用了8个GPU计算卡的裸金属主机。
产品特色及定位
图形处理:该产品采用Intel第5代Xeon Scalable高主频处理器,在3D建模场景,为您提供足够的CPU算力支撑,使得图形的渲染和设计更加顺畅。
推理任务:采用全新48 GB显存的图形处理单元(GPU)来加速推理任务,支持FP8浮点数格式,搭配ACK容器可灵活支持各类AIGC模型的推理,尤其适用于70 B以下LLM模型的推理任务。
训练任务:该实例提供高性价比的计算能力,FP32计算性能相比7代推理实例提升1倍,特别适用于基于FP32开发的CV类模型和其他各类中小模型的训练。
采用最新的CIPU 1.0云处理器
具有解耦计算和存储能力,可以灵活选择所需存储资源。相对于上一代,该实例规格的机器间带宽提升至160 Gbit/s,可以更快地完成数据传输和处理。
CIPU提供裸金属能力,相对于传统虚拟化实例,可以支持GPU实例之间的PCIE P2P通信。
计算:
采用全新GPU计算卡
支持vGPU、RTX、TensorRT等常用加速功能
采用PCIE Switch互联,相比直连CPU方案,其NCCL性能提升36%,多卡分片推理大模型时,推理性能最大提升9%
显存容量提升至48 GB*8卡,支持70 B及更大模型单机推理
处理器:3.4 GHz主频的Intel ® Xeon ®可扩展处理器(SPR),全核睿频可达3.9 GHz
存储:
均为I/O优化实例
仅支持ESSD云盘和ESSD AutoPL云盘,支持EED弹性缓存盘
网络:
支持IPv4、IPv6
超高网络性能,3000万PPS网络收发包能力
支持ERI(Elastic RDMA Interface),可以在VPC网络下实现RDMA直通加速互联,将带宽提升至160 Gbit/s,可用于CV和传统模型的训练业务。
说明关于ERI的使用说明,请参见在企业级实例上配置eRDMA。
适用场景:
结合云市场的GRID镜像使用GRID图形驱动,启动OpenGL和Direct3D图形能力,提供工作站级图形处理能力,适用于动漫、影视特效制作和渲染
结合ACK容器化管理能力,更高效、低成本地支撑AIGC图形生成和LLM大模型推理(最大支持130 B)
其他通用AI识别场景、图像识别、语音识别等
ebmgn8is包括的实例规格及指标数据如下表所示。
实例规格 | vCPU | 内存(GiB) | GPU显存 | 网络基础带宽(Gbit/s) | 网络收发包PPS | 单网卡私有IPv4地址数 | 单网卡IPv6地址数 | 多队列(主网卡/辅助网卡) | 弹性网卡 | 最大挂在数据盘数 | 云盘最大带宽(Gbit/s) |
ecs.ebmgn8is.32xlarge | 128 | 1024 | 48GB*8 | 160(80 * 2) | 3000万 | 30 | 30 | 64/16 | 32 | 31 | 6 |
您可以前往ECS实例可购买地域,查看实例在各地域的可购情况。
ebmgn8is实例规格所使用的镜像启动模式必须为UEFI模式。如果您需要使用自定义镜像,请确保该自定义镜像支持UEFI启动模式,并且镜像的启动模式属性已设置为UEFI模式。具体操作,请参见通过API设置自定义镜像的启动模式为UEFI模式。
指标的含义请参见实例规格族。由于业务场景的不同,网络收发包PPS会存在明显差异。因此,我们建议您进行业务压测以了解实例的性能表现,以便选择合适的实例规格。
暂无法获取EBM弹性裸金属实例的CPU基础监控信息,您可通过安装云监控插件获取CPU监控信息。具体操作,请参见安装云监控插件。
GPU计算型弹性裸金属服务器实例规格族ebmgn7e
ebmgn7e的特点如下:
基于神龙架构,实现软件定义硬件计算,灵活弹性与强悍性能兼备
计算:
处理器:基于Intel ® Xeon ®Scalable计算平台,2.9 GHz主频,全核睿频3.5 GHz,支持PCIe 4.0接口
存储:
I/O优化实例
仅支持ESSD云盘和ESSD AutoPL云盘
网络:
支持IPv6
超高网络性能,2400万PPS网络收发包能力
适用场景:
各类深度学习训练开发业务
HPC加速计算和仿真
重要在使用高通信负载的AI训练业务如Transformer等模型时,务必启用NVLink进行GPU间的数据通信,否则可能由于PCIe链路大规模数据传输引起非预期的故障,导致数据受损。如不确定您使用的训练通信链路拓扑,请提交工单由阿里云技术专家为您提供技术支持。
ebmgn7e包括的实例规格及指标数据如下表所示。
实例规格 | vCPU | 内存(GiB) | GPU显存 | 网络基础带宽(Gbit/s) | 网络收发包PPS | 多队列(主网卡/辅助网卡) | 弹性网卡 |
ecs.ebmgn7e.32xlarge | 128 | 1024 | 80GB * 8 | 64 | 2400万 | 32/12 | 32 |
您可以前往ECS实例可购买地域,查看实例在各地域的可购情况。
指标的含义请参见实例规格族。由于业务场景的不同,网络收发包PPS会存在明显差异。因此,我们建议您进行业务压测以了解实例的性能表现,以便选择合适的实例规格。
暂无法获取EBM弹性裸金属实例的CPU基础监控信息,您可通过安装云监控插件获取CPU监控信息。具体操作,请参见安装云监控插件。
MIG(Multi-Instance GPU)功能需要您在ebmgn7e实例启动后自行检查并决定是否开启或关闭,系统无法保证MIG(Multi-Instance GPU)功能是开启或关闭状态。关于MIG(Multi-Instance GPU)的更多信息,请参见NVIDIA Multi-Instance GPU User Guide。
ebmgn7e实例是否支持开启MIG功能的说明如下所示:
实例规格 | 是否支持开启MIG功能 | 说明 |
ecs.ebmgn7e.32xlarge | 是 | ebmgn7e裸金属实例支持开启MIG功能。 |
GPU计算型弹性裸金属服务器实例规格族ebmgn7i
ebmgn7i的特点如下:
基于神龙架构,实现软件定义硬件计算,灵活弹性与强悍性能兼备
计算:
采用NVIDIA A10 GPU计算卡
创新的Ampere架构
支持vGPU、RTX、TensorRT等常用加速功能
处理器:2.9 GHz主频的Intel ® Xeon ®可扩展处理器(Ice Lake),全核睿频3.5 GHz
存储:
I/O优化实例
仅支持ESSD云盘和ESSD AutoPL云盘
网络:
支持IPv6
超高网络性能,2400万PPS网络收发包能力
适用场景:
配备高性能CPU、内存、GPU,可以处理更多并发AI推理任务,适用于图像识别、语音识别、行为识别业务
支持RTX功能,搭配高主频CPU,提供高性能的3D图形虚拟化能力,适用于远程图形设计、云游戏等高强度图形处理业务
支持RTX功能,搭配高网络带宽和云盘带宽,适用于搭建高性能渲染农场
配备多个GPU,搭配高网络带宽,适用于小规模深度学习训练业务
ebmgn7i包括的实例规格及指标数据如下表所示。
实例规格 | vCPU | 内存(GiB) | GPU | GPU显存 | 网络基础带宽(Gbit/s) | 网络收发包PPS | 多队列 | 弹性网卡 |
ecs.ebmgn7i.32xlarge | 128 | 768 | NVIDIA A10 * 4 | 24GB * 4 | 64 | 2400万 | 32 | 32 |
您可以前往ECS实例可购买地域,查看实例在各地域的可购情况。
指标的含义请参见实例规格族。
暂无法获取EBM弹性裸金属实例的CPU基础监控信息,您可通过安装云监控插件获取CPU监控信息。具体操作,请参见安装云监控插件。
GPU计算型弹性裸金属服务器实例规格族ebmgn7
ebmgn7的特点如下:
基于神龙架构,实现软件定义硬件计算,灵活弹性与强悍性能兼备
计算:
处理器:2.5 GHz主频的Intel ® Xeon ® Platinum 8269CY(Cascade Lake)
存储:
I/O优化实例
仅支持ESSD云盘和ESSD AutoPL云盘
网络:
支持IPv6
实例网络性能与计算规格对应(规格越高网络性能越强)
适用场景:
深度学习,例如图像分类、无人驾驶、语音识别等人工智能算法的训练应用
高GPU负载的科学计算,例如计算流体动力学、计算金融学、分子动力学、环境分析等
ebmgn7包括的实例规格及指标数据如下表所示。
实例规格 | vCPU | 内存(GiB) | GPU显存 | 网络基础带宽(Gbit/s) | 网络收发包PPS | 多队列 | 弹性网卡 | 单网卡私有IPv4地址数 |
ecs.ebmgn7.26xlarge | 104 | 768 | 40GB*8 | 30 | 1800万 | 16 | 15 | 10 |
您可以前往ECS实例可购买地域,查看实例在各地域的可购情况。
指标的含义请参见实例规格族。
暂无法获取EBM弹性裸金属实例的CPU基础监控信息,您可通过安装云监控插件获取CPU监控信息。具体操作,请参见安装云监控插件。
MIG(Multi-Instance GPU)功能需要您在ebmgn7实例启动后自己检查并决定是否开启或关闭,系统无法保证MIG(Multi-Instance GPU)功能是开启还是关闭状态。关于MIG(Multi-Instance GPU)的更多信息,请参见NVIDIA Multi-Instance GPU User Guide。
ebmgn7实例是否支持开启MIG功能的说明如下所示:
实例规格 | 是否支持开启MIG功能 | 说明 |
ecs.ebmgn7.26xlarge | 是 | ebmgn7裸金属实例支持开启MIG功能。 |
GPU计算型弹性裸金属服务器实例规格族ebmgn6ia
ebmgn6ia的特点如下:
依托第三代神龙架构,通过芯片快速路径加速手段,提供稳定可预期的超高计算、存储和网络性能
采用NVIDIA T4 GPU计算加速器提供GPU加速能力,助力图形和AI业务,搭配容器技术可以提供60路以上虚拟Android终端,并对每路终端显示进行硬件视频转码加速
计算:
处理器与内存配比约为1:3
处理器:2.8 GHz主频的Ampere® Altra®处理器,睿频3.0 GHz,原生ARM计算平台为Android服务器提供高效的性能和优秀的App兼容性
存储:
I/O优化实例
仅支持ESSD云盘和ESSD AutoPL云盘
网络:
支持IPv6
适用场景:
基于Android提供App远端服务,例如云业务在线待机、云手游和云手机、Android业务爬虫
ebmgn6ia包括的实例规格及指标数据如下表所示。
实例规格 | vCPU | 内存(GiB) | GPU | GPU显存 | 网络基础带宽(Gbit/s) | 网络收发包PPS | 多队列 | 弹性网卡 | 单网卡私有IPv4地址数 |
ecs.ebmgn6ia.20xlarge | 80 | 256 | NVIDIA T4 * 2 | 16GB * 2 | 32 | 2400万 | 32 | 15 | 10 |
您可以前往ECS实例可购买地域,查看实例在各地域的可购情况。
指标的含义请参见实例规格族。
Ampere® Altra®处理器对操作系统内核版本有一定要求。当您使用该实例规格创建ECS实例时,可以直接选用Alibaba Cloud Linux 3和CentOS 8.4及以上版本的操作系统镜像(建议您使用Alibaba Cloud Linux 3镜像)。如果您需要使用其他操作系统版本,请参见Ampere Altra (TM) Linux Kernel Porting Guide,在指定操作系统的ECS实例中为内核打上相应的补丁,完成之后基于该ECS实例创建自定义镜像,然后再通过自定义镜像创建新的ECS实例时选择该实例规格。
暂无法获取EBM弹性裸金属实例的CPU基础监控信息,您可通过安装云监控插件获取CPU监控信息。具体操作,请参见安装云监控插件。
GPU计算型弹性裸金属服务器实例规格族ebmgn6e
ebmgn6e的特点如下:
基于神龙架构,实现软件定义硬件计算,灵活弹性与强悍性能兼备
采用NVIDIA V100(32 GB NVLink) GPU计算卡
GPU加速器:V100(SXM2封装)
创新的Volta架构
单GPU显存32 GB HBM2(GPU显存带宽900 GB/s)
单GPU 5120个CUDA Cores
单GPU 640个Tensor Cores
单GPU支持6个NVLink链路(NVLink属于双向链路),单向链路的带宽为25 GB/s,总带宽为6×25×2=300 GB/s
计算:
处理器与内存配比为1:8
处理器:2.5 GHz主频的Intel ® Xeon ® Platinum 8163(Skylake)
存储:
I/O优化实例
仅支持ESSD云盘、ESSD AutoPL云盘、SSD云盘和高效云盘
网络:
支持IPv6
实例网络性能与计算规格对应(规格越高网络性能越强)
适用场景:
深度学习,例如图像分类、无人驾驶、语音识别等人工智能算法的训练以及推理应用
科学计算,例如计算流体动力学、计算金融学、分子动力学、环境分析等
ebmgn6e包括的实例规格及指标数据如下表所示。
实例规格 | vCPU | 内存(GiB) | GPU | GPU显存 | 网络基础带宽(Gbit/s) | 网络收发包PPS | 多队列 | 弹性网卡 | 单网卡私有IPv4地址数 |
ecs.ebmgn6e.24xlarge | 96 | 768 | NVIDIA V100 * 8 | 32GB * 8 | 32 | 480万 | 16 | 15 | 10 |
您可以前往ECS实例可购买地域,查看实例在各地域的可购情况。
指标的含义请参见实例规格族。
暂无法获取EBM弹性裸金属实例的CPU基础监控信息,您可通过安装云监控插件获取CPU监控信息。具体操作,请参见安装云监控插件。
GPU计算型弹性裸金属服务器实例规格族ebmgn6v
ebmgn6v的特点如下:
基于神龙架构,实现软件定义硬件计算,灵活弹性与强悍性能兼备
采用NVIDIA V100 GPU计算卡
GPU加速器:V100(SXM2封装)
创新的Volta架构
单GPU显存16 GB HBM2(GPU显存带宽900 GB/s)
单GPU 5120个CUDA Cores
单GPU 640个Tensor Cores
单GPU支持6个NVLink链路(NVLink属于双向链路),单向链路的带宽为25 GB/s,总带宽为6×25×2=300 GB/s
计算:
处理器与内存配比为1:4
处理器:2.5 GHz主频的Intel ® Xeon ® Platinum 8163(Skylake)
存储:
I/O优化实例
仅支持ESSD云盘、ESSD AutoPL云盘、SSD云盘和高效云盘
网络:
支持IPv6
实例网络性能与计算规格对应(规格越高网络性能越强)
适用场景:
深度学习,例如图像分类、无人驾驶、语音识别等人工智能算法的训练以及推理应用
科学计算,例如计算流体动力学、计算金融学、分子动力学、环境分析等
ebmgn6v包括的实例规格及指标数据如下表所示。
实例规格 | vCPU | 内存(GiB) | GPU | GPU显存 | 网络基础带宽(Gbit/s) | 网络收发包PPS | 多队列 | 弹性网卡 | 单网卡私有IPv4地址数 |
ecs.ebmgn6v.24xlarge | 96 | 384 | NVIDIA V100 * 8 | 16GB * 8 | 30 | 450万 | 8 | 32 | 10 |
您可以前往ECS实例可购买地域,查看实例在各地域的可购情况。
指标的含义请参见实例规格族。
暂无法获取EBM弹性裸金属实例的CPU基础监控信息,您可通过安装云监控插件获取CPU监控信息。具体操作,请参见安装云监控插件。
GPU计算型弹性裸金属服务器实例规格族ebmgn6i
ebmgn6i的特点如下:
基于神龙架构,实现软件定义硬件计算,灵活弹性与强悍性能兼备
GPU加速器:T4
创新的Turing架构
单GPU显存16 GB(GPU显存带宽320 GB/s)
单GPU 2560个CUDA Cores
单GPU多达320个Turing Tensor Cores
可变精度Tensor Cores支持65 TFlops FP16、130 INT8 TOPS、260 INT4 TOPS
计算:
处理器与内存配比为1:4
处理器:2.5 GHz主频的Intel ® Xeon ® Platinum 8163(Skylake)
存储:
I/O优化实例
仅支持ESSD、ESSD AutoPL云盘、SSD云盘和高效云盘
网络:
支持IPv6
实例网络性能与计算规格对应(规格越高网络性能越强)
适用场景:
AI(DL/ML)推理,适合计算机视觉、语音识别、语音合成、NLP、机器翻译、推荐系统
云游戏云端实时渲染
AR/VR的云端实时渲染
重载图形计算或图形工作站
GPU加速数据库
高性能计算
ebmgn6i包括的实例规格及指标数据如下表所示。
实例规格 | vCPU | 内存(GiB) | GPU | GPU显存 | 网络基础带宽(Gbit/s) | 网络收发包PPS | 多队列 | 弹性网卡 | 单网卡私有IPv4地址数 |
ecs.ebmgn6i.24xlarge | 96 | 384 | NVIDIA T4 * 4 | 16GB * 4 | 30 | 450万 | 8 | 32 | 10 |
您可以前往ECS实例可购买地域,查看实例在各地域的可购情况。
指标的含义请参见实例规格族。
暂无法获取EBM弹性裸金属实例的CPU基础监控信息,您可通过安装云监控插件获取CPU监控信息。具体操作,请参见安装云监控插件。
GPU计算型实例规格族gn5i
gn5i的特点如下:
计算:
采用NVIDIA P4 GPU卡
处理器与内存配比为1:4
处理器:2.5 GHz主频的Intel ® Xeon ® E5-2682 v4(Broadwell)
存储:
I/O优化实例
仅支持SSD云盘和高效云盘
网络:
支持IPv6
实例网络性能与计算规格对应(规格越高网络性能越强)
适用场景:
深度学习推理
多媒体编解码等服务器端GPU计算工作负载
gn5i包括的实例规格及指标数据如下:
实例规格 | vCPU | 内存(GiB) | GPU | GPU显存 | 网络基础带宽(Gbit/s) | 网络收发包PPS | 多队列 | 弹性网卡 | 单网卡私有IPv4地址数 |
ecs.gn5i-c2g1.large | 2 | 8 | NVIDIA P4 * 1 | 8GB * 1 | 1 | 10万 | 2 | 2 | 6 |
ecs.gn5i-c4g1.xlarge | 4 | 16 | NVIDIA P4 * 1 | 8GB * 1 | 1.5 | 20万 | 2 | 3 | 10 |
ecs.gn5i-c8g1.2xlarge | 8 | 32 | NVIDIA P4 * 1 | 8GB * 1 | 2 | 40万 | 4 | 4 | 10 |
ecs.gn5i-c16g1.4xlarge | 16 | 64 | NVIDIA P4 * 1 | 8GB * 1 | 3 | 80万 | 4 | 8 | 20 |
ecs.gn5i-c16g1.8xlarge | 32 | 128 | NVIDIA P4 * 2 | 8GB * 2 | 6 | 120万 | 8 | 8 | 20 |
ecs.gn5i-c28g1.14xlarge | 56 | 224 | NVIDIA P4 * 2 | 8GB * 2 | 10 | 200万 | 14 | 8 | 20 |
您可以前往ECS实例可购买地域,查看实例在各地域的可购情况。
指标的含义请参见实例规格族。由于业务场景的不同,网络收发包PPS会存在明显差异。因此,我们建议您进行业务压测以了解实例的性能表现,以便选择合适的实例规格。