2023年8月8日,NVIDIA创始人兼CEO黄仁勋在计算机图形年会SIGGRAPH上发布了HBM3e内存新一代GH200 Grace Hopper超级芯片。这款芯片被黄仁勋称为“加速计算和生成式AI时代的处理器”,旨在用于任何大型语言模型,以降低推理成本。
与今年5月发布的GH200不同,新一代GH200芯片搭载了全球首款HBM3e内存,内存容量和带宽都有显著提高,专为加速计算和生成式AI时代而设计。
新版GH200芯片平台基于72核Grace CPU,配备480GB ECC LPDDR5X内存以及GH100计算GPU。此外,它还搭配着141GB的HBM3e内存,分为六个24GB的堆栈,并采用了6,144位的内存接口。尽管实际上NVIDIA安装了144GB的内存,但可用的内存容量为141GB。
借助全球最快的HBM3e内存,这款芯片的内存容量高达141GB,带宽每秒可达到5TB。每个GPU的容量比NVIDIA H100 GPU多出1.7倍,带宽比H100高1.55倍。
NVIDIA强调,新版GH200 Grace Hopper芯片使用了与原版相同的Grace CPU和GH100 GPU芯片,因此无需推出新的软件版本或步进。原版GH200和升级版GH200将共存于市场,后者将以更高的价格销售,因为它具备更先进的内存技术带来的更高性能。
NVIDIA表示,新版GH200旨在处理世界上最复杂的生成式AI工作负载,包括大型语言模型、推荐系统和矢量数据库,并将提供多种配置。预计新版GH200将于2024年第二季度投产。
编辑:黄飞
-
处理器
+关注
关注
68文章
19281浏览量
229775 -
NVIDIA
+关注
关注
14文章
4985浏览量
103031 -
gpu
+关注
关注
28文章
4736浏览量
128928 -
内存
+关注
关注
8文章
3024浏览量
74033 -
AI
+关注
关注
87文章
30851浏览量
269008 -
生成式AI
+关注
关注
0文章
503浏览量
474 -
HBM3
+关注
关注
0文章
74浏览量
154 -
HBM3E
+关注
关注
0文章
78浏览量
254
发布评论请先 登录
相关推荐
评论