在AWS运行NVIDIA GPU十周年之际,AWS发布了采用全新A100的Amazon EC2 P4d实例
十年前,AWS(Amazon Web Services)发布了首个采用NVIDIA M2050 GPU的实例。当时,基于CUDA的应用主要专注于加速科学模拟,AI和深度学习还遥遥无期。
自那时起,AW就不断扩充云端GPU实例阵容,包括K80(p2)、K520(g3)、M60(g4)、V100(p3 / p3dn)和T4(g4)。
现在,已全面上市的全新AWS P4d实例采用最新NVIDIA A100 Tensor Core GPU,开启了加速计算的下一个十年。
全新的P4d实例,为机器学习训练和高性能计算应用提供AWS上性能与成本效益最高的GPU平台。与默认的FP32精度相比,全新实例将FP16机器学习模型的训练时间减少多达3倍,将TF32机器学习模型的训练的时间减少多达6倍。
这些实例还提供出色的推理性能。NVIDIA A100 GPU在最近的MLPerf Inference基准测试中一骑绝尘,实现了比CPU快237倍的性能。
每个P4d实例均内置八个NVIDIA A100 GPU,通过AWS UltraClusters,客户可以利用AWS的Elastic Fabric Adapter(EFA)和Amazon FSx提供的可扩展高性能存储,按需、可扩展地同时访问多达4,000多个GPU。P4d提供400Gbps网络,通过使用NVLink、NVSwitch、NCCL和GPUDirect RDMA等NVIDIA技术,进一步加速深度学习训练的工作负载。EFA上的NVIDIA GPUDirect RDMA在服务器之间可通过GPU传输数据,无需通过CPU和系统内存,从而确保网络的低延迟。
此外,许多AWS服务都支持P4d实例,包括Amazon Elastic Container Services、Amazon Elastic Kubernetes Service、AWS ParallelCluster和Amazon SageMaker。P4d还可使用所有NGC提供的经过优化的容器化软件,包括HPC应用、AI框架、预训练模型、Helm图表以及TensorRT和Triton Inference Server等推理软件。
目前,P4d实例已在美国东部和西部上市,并将很快扩展到其他地区。用户可以通过按需实例(On-Demand)、Savings Plans、预留实例(Reserved Instances)或竞价型实例(Spot Instances)几种不同的方式进行购买。
GPU云计算发展最初的十年,已为市场带来超过100 exaflops的AI计算。随着基于NVIDIA A100 GPU的Amazon EC2 P4d实例的问世,GPU云计算的下一个十年将迎来一个美好的开端。
NVIDIA和AWS不断帮助各种应用突破AI的界限,以便了解客户将如何运用AI强大的性能。
SI3457CD品牌:Vishay/威世年份:2022产地:中国SI3457CD标签验标回复遴选:1、邓润华:标签无异常,可以2、···
GRM31CR61C476ME44L品牌:Murata/村田年份:2021产地:日本GRM31CR61C476ME44L标签验标回复遴选:1、邓润华···
BMI270品牌:Bosch Sensortec/博世传感年份:2024产地:菲律宾BMI270标签验标回复遴选:1、邓润华:博世标签···
STM32G031K8U6品牌:STMicroelectronics/意法半导体年份:2024STM32G031K8U6标签验标回复遴选:1、邓润华:···
DG9431DV-T1-E3品牌:Vishay/威世年份:2005产地:中国DG9431DV-T1-E3标签验标回复遴选:1、邓润华:标签无···
···
CW2217BAAD品牌:CEllWISE/赛微年份:2024CW2217BAAD标签验标回复遴选:1、邓润华:可以2、方洪涛:看好3、···
FODM3063R2年份:2021产地:中国FODM3063R2标签验标回复遴选:1、方洪涛:看标没事2、黄德华:仙童的,整体···
1050281001品牌:Molex/莫仕年份:2022产地:中国1050281001标签验标回复遴选:1、邓润华:工厂标签,可以2···
TPS63060DSCR品牌:Texas Instruments/德州仪器年份:2021产地:马来西亚TPS63060DSCR标签验标回复遴选:1、···
MAX20402AFLE/VY+T品牌:Analog Devices/亚德诺年份:2023产地:中国台湾MAX20402AFLE/VY+T标签验标回复遴选···
TB67H45FNG品牌:Toshiba/东芝年份:2022TB67H45FNG标签验标回复遴选:1、方洪涛:看货为主,标重打,但不是···
HPG12P14SRT153T品牌:Amphenol Advanced Sensors年份:2020产地:中国HPG12P14SRT153T标签验标回复遴选:1···
···
···
MIMX8MM6DVTLZAA品牌:NXP Semiconductors/恩智浦年份:2023MIMX8MM6DVTLZAA标签验标回复遴选:1、供应商判···
A1393SEHLT-T品牌:Allegro/急速微年份:2024产地:中国A1393SEHLT-T标签验标回复遴选:1、黄德华:可以2、···
B82793C0475N265品牌:TDK EPCOS年份:2023产地:中国B82793C0475N265标签验标回复遴选:1、方洪涛:看可以···