英伟达发布革命性AI芯片H200,强化AI与高性能计算能力
全球超算大会SC2023上,英伟达宣布了一项重大突破——发布目前世界上最强大的AI芯片H200,这款GPU在H100的基础上进行了升级,显著提升了内存带宽和容量,从而增强了生成式AI任务的处理能力。
英伟达的创新引领:英伟达高性能计算和超大规模数据中心业务副总裁Ian Buck强调,公司通过在硬件和软件上的持续创新,正在推动新型AI超算的发展。
H200的技术亮点:
- 内存升级:相较于H100,H200的内存带宽提高了1.4倍,内存容量增加了1.8倍,使得处理生成式AI任务的能力大幅提升。
- LLM运行加速:H200具备改变游戏规则的性能和内存功能,特别适用于加速语言模型(LLM)的运行,并推进科学计算领域的高性能计算(HPC)工作负载。
- 四核配置:四核服务器平台通过NVIDIA NVLink互连连接四个GH200 Grace Hopper超级芯片,每个节点配备了多达288个Arm Neoverse内核和16 petaflops的AI性能,以及高达2.3 TB的高速内存,实现了强大的AI推理加速。
- LLM推理性能提升:H200在处理LLama2等LLM时,推理速度相比H100 GPU提高了近1.9倍。
- AI模型处理效率:运行GPT-3等模型时,H200的推理性能提高了18倍,Llama2-13B上每秒可处理12000个tokens。
- 内存带宽优化:对于内存密集型HPC应用,如模拟仿真、人工智能研究等,H200更高的内存带宽确保了高效的数据访问和操作,与CPU相比,最快可提速110倍。
能源效率与TCO提升:H200在能源效率和总拥有成本(TCO)方面达到了新高度,为用户提供了更加经济、高效的计算解决方案。
市场布局:英伟达计划于2024年第二季度开始向全球系统制造商和云服务提供商供货H200。预计亚马逊网络服务、谷歌云、微软Azure和甲骨文云基础设施将成为首批采用H200实例的云服务提供商。
超算Top500新动态:最新一期超算Top500榜单显示,超过80%的新上榜系统采用了英伟达的H100芯片,英伟达为超过2.5 exaflops的高性能计算性能提供了技术支持。
全球合作:多家超算中心已宣布将集成GH200系统,包括德国尤利希超算中心,计划在“木星”(JUPITER)项目中使用GH200超级芯片,以打造欧洲首台百亿亿次超级计算机。
结论:H200的发布标志着英伟达在AI和高性能计算领域取得的重大进展,不仅为AI研究和开发提供了强大动力,也为全球超算中心提供了先进的算力服务,推动了科技行业的创新与发展。