0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

AMD硬刚英伟达,推出Instinct MI300,单芯片可运行800亿参数

DzOH_ele 来源:电子发烧友网 2023-06-14 16:46 次阅读

美国时间本周二,AMD举行了重磅发布会,推出了一款全新的人工智能GPU Instinct MI300,并表示这款处理器将于今年晚些时候开始向部分客户发货。自英伟达发布了AI芯片后,便彻底带动了市场的投资热情,也推动英伟达登上万亿美元市值的高峰。此次AMD发布重磅AI芯片,有望对英伟达当前的市场地位形成一定冲击。

AMD推出高性能AI芯片

在这次AMD的新品发布会中,核心产品无疑是用于训练大模型的GPU Instinct MI300。早在今年初,AMD便已经宣布了新一代Instinct MI300,是全球首款同时集成CPU、GPU的数据中心APU。

601e5ef4-0a8e-11ee-962d-dac502259ad0.png

如今,这款芯片的名字变成了Instinct MI300A,而纯GPU产品则命名为Instinct MI300X。据AMD的CEO苏姿丰透露,MI300A是全球首个为AI和HPC(高性能计算)打造的APU加速卡,拥有13个小芯片,总共包含1460亿个晶体管,24个Zen 4 CPU核心,1个CDNA 3图形引擎和128GB HBM3内存。

相比前代MI250,MI300的性能提高八倍,效率提高五倍。AMD在发布会稍早介绍,新的Zen 4c内核比标准的Zen 4内核密度更高,比标准Zen 4的内核小35%,同时保持100%的软件兼容性。

602c2b92-0a8e-11ee-962d-dac502259ad0.png

而GPU MI300X更是本次发布会的重点,这款芯片是AMD针对大语言模型优化的版本,该产品的晶体管数量达到1530亿个,内存达到了192GB,内存带宽为5.2TB/s,Infinity Fabric带宽为896GB/s。对比英伟达的H100,MI300X提供的HBM(高带宽内存)密度约为H100的2.4倍,HBM带宽是1.6倍。

这意味着AMD的这款产品可以运行比英伟达H100更大的模型,在现场AMD演示了MI300X运行400亿参数的Falcon模型,而OpenAI的GPT-3模型有1750亿个参数。苏姿丰还用Hugging Face基于MI300X的大模型写了一首关于活动举办地旧金山的诗。

这也是全球首次在单个GPU上运行这么大的模型,据AMD介绍,单个MI300X可以运行一个参数多达800亿的模型。而在未来随着AI模型越来越大,意味着需要更多GPU来运行最新的大模型,而AMD芯片上内存的增加,意味着开发人员不需要那么多GPU,可以为用户节省大量成本。

60a97e44-0a8e-11ee-962d-dac502259ad0.png

苏姿丰表示,MI300X将于今年第三季度向一些客户提供样品,并于第四季度量产。同时AMD还发布了AMD Instinct Platform,集合了8个MI300X,可提供总计1.5TB的HBM3内存。对标英伟达的CUDA,AMD也介绍了自身的芯片软件ROCm,AMD总裁Victor Peng称,在构建强大的软件堆栈方面,AMD取得了真正的巨大进步,ROCm软件栈可与模型、库、框架和工具的开放生态系统配合使用。

之所以将重心放在AI芯片,也是因为AMD非常看好未来的AI市场。苏姿丰认为,数据中心人工智能加速器的潜在市场总额将从今年的300亿美元增长到2027年的1500亿美元以上。

硬刚英伟达,但尚未透露大客户

从AMD所介绍的产品性能来看,将成为当下AI市场的有力竞争者,尤其在ChatGPT等生成式AI的带动下,市场对高性能GPU需求旺盛。不过当前市场中,英伟达处于绝对优势,占据80%的市场。

而AMD并没有公布这款GPU的具体价格,但是对比英伟达H100价格大多在3万美元以上,如果MI300X价格能够更加实惠,将显著的对英伟达产品造成冲击,并有助于降低生成式AI的研发成本。

有意思的是,在如此强劲的性能面前,市场却似乎并不买单。截至当日收盘,AMD股价反而下降了3.61%,市值来到2000亿元关口。而英伟达股价则拉升了3.9%,总市值达到1.01万亿美元,是AMD的五倍。

此次AMD并未透露哪些公司会采用MI300X或简配版MI300A,而在此前的发布会中,AMD都会披露新产品的大客户。这可能让市场认为,目前并没有大客户为这款芯片买单。

另一方面,AMD并没有透露新款AI芯片的具体售价,但想要有显著的成本优势可能不太现实,因为高密度的HBM价格昂贵。即便MI300X的内存达到了192GB,但这也不是显著优势,因为英伟达也拥有相同内存规格的产品。

更重要的原因在于,MI300并不具备H100所拥有的Transformer Engine。Transformer Engine能够用于加速Transformer模型,以在AI的训练和推理中以较低的内存利用率提供更好的性能。

有分析师认为,如果训练一个新的模型,需要投入数千个GPU,并耗费一年的时间,那么几乎不会有人会浪费2-3年或者投入3倍数量的GPU。而Transformer Engine能够让大模型实现三倍的性能表达。

尽管市场中认为,AMD的MI300芯片应该是除了谷歌的TPU之外,能与英伟达在AI训练端上匹敌的产品。成为当前大企业在训练AI大模型时,除了英伟达之外的另一个重要选择。

但想要在短时间内挑战英伟达,显然还是比较困难的。就如AMD总裁VictorPeng说的那样,“尽管这是一个过程,但我们在构建强大的软件堆栈方面取得了很大进展,该软件堆栈与开放的模型、库、框架和工具生态系统兼容。”

无论如何需要市场中有大客户切实的使用AMD新款芯片。

小结

AMD此次重磅发布的MI300系列芯片,无疑为AI市场注入了一剂强心针,不仅预示着AMD在持续看好未来的AI市场,也将表明AMD将在这一市场中与英伟达正面竞争。至少对于相关企业及用户而言,有更多的选择是一件好事。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • amd
    amd
    +关注

    关注

    25

    文章

    5438

    浏览量

    133916
  • 人工智能
    +关注

    关注

    1791

    文章

    46821

    浏览量

    237464
  • AI芯片
    +关注

    关注

    17

    文章

    1859

    浏览量

    34901

原文标题:AMD硬刚英伟达,推出Instinct MI300,单芯片可运行800亿参数

文章出处:【微信号:elecfanscom,微信公众号:核芯产业观察】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    IBM与AMD携手将在IBM云上部署AMD Instinct MI300X加速器

    合作服务预计将于2025年上半年正式推出AMD Instinct MI300X加速器作为AMD在高性能计算领域的旗舰产品,将为IBM云上的
    的头像 发表于 11-19 11:03 260次阅读

    三星首度引入AMD MI300X,缓解AI GPU短缺

    三星电子近日斥资约270亿韩元(约合1.42亿元人民币),购买了AMD Instinct MI300X加速器。这一举措标志着三星电子首次引入
    的头像 发表于 10-10 17:15 438次阅读

    AMD发布全新AI芯片Instinct MI325X

    在近日举行的COMPUTEX台北国际电脑展上,AMD董事长兼CEO苏姿丰发表了精彩演讲,并正式发布了一款备受瞩目的AI芯片——Instinct MI325X。这款
    的头像 发表于 06-04 14:49 940次阅读

    人工智能市场风向转变,AMD Instinct MI300X GPU更受欢迎

    近一半的受访者表示对AMDInstinct MI300X GPU持乐观态度。与英伟的H100系列相比,
    的头像 发表于 03-11 15:28 907次阅读

    AMD Instinct MI300新版将采用HBM3e内存,竞争英伟B100

    AMD于去年宣布旗下两款Instinct MI300加速器,包括基于GPU的MI300X以及基于APU架构的MI300A, both配备19
    的头像 发表于 02-23 14:36 953次阅读

    英伟繁荣背后的挑战 仍面临着各种内忧外患

    为抢占AI商机,英特尔和AMD都紧跟着NVIDIA脚步,在NVIDIA率先推出采用台积电4nm的H100后,AMD于去年推出首批应用于AI和HPC的“
    的头像 发表于 02-21 14:16 720次阅读
    <b class='flag-5'>英伟</b><b class='flag-5'>达</b>繁荣背后的挑战 仍面临着各种内忧外患

    AMD首批Instinct MI300X已开始交付

    模型。与Instinct MI300A不同,Instinct MI300X不包含x86 CPU内核,但通过增加CDNA 3小芯片的数量和搭载
    的头像 发表于 01-24 16:57 658次阅读

    AMD Instinct MI300X已向LaminiAI批量供货

    LaminaAI作为AMD的长期合作伙伴,能够抢先体验到全新MI300X加速器的强大优势,实属正常。该公司首席执行官Sharon Zhou在社交媒体进行了公告,同时透露,已经接收到配置8个Instinct
    的头像 发表于 01-23 09:53 418次阅读

    不同算力芯片的特点与区别

    AMD 推出数据中心 APU Instinct MI300AMD 推出数据中心APU(加速处理
    发表于 01-22 11:20 1793次阅读
    不同算力<b class='flag-5'>芯片</b>的特点与区别

    英伟AMD激战AI芯片市场,台积电成最大赢家

    AI芯片市场上,英伟AMD之间的竞争越来越激烈。AMDMI300A系列产品已开始批量生产,
    的头像 发表于 01-10 18:11 1318次阅读

    AMD Instinct MI300A获得德国订单

    先进微设备公司(AMD)于本月6日成功举办了"推进人工智能"(Advancing AI)主题活动,期间正式发布了专为数据中心设计的Instinct MI300系列计算卡,首批推出
    的头像 发表于 12-25 11:30 437次阅读
    <b class='flag-5'>AMD</b> <b class='flag-5'>Instinct</b> <b class='flag-5'>MI300</b>A获得德国订单

    Meta、OpenAI和微软将采用AMD AI芯片挑战英伟市场地位

    AMD的高端芯片Instinct MI300X于明年初问世,并符合人工智能公司及云服务提供商的期望,有望降低开发模型成本,为英伟
    的头像 发表于 12-11 16:13 658次阅读

    Meta、微软承诺购买AMD新型人工智能芯片Instinct MI300X

    amd的最新高端芯片instinctmi300x明年年初上市开始,人工智能公司和有关云服务提供商的能满足,这是人工智能模型开发费用,降低英伟
    的头像 发表于 12-07 17:31 1082次阅读

    AI封测需求强劲, AMD英伟芯片巨头将助推产业链增长

    等公司有望获得丰厚的收益。 据百能云芯电子元器件商城了解,超微即将推出的全新「Instinct MI300」系列AI芯片备受瞩目,而英伟
    的头像 发表于 12-05 15:46 702次阅读

    戴尔禁止经销商在中国销售RX 7900 XTX、7900 XT、PRO W7900 和MI300 GPU

    被禁止销售的产品有isg的instinct加速器和csg的客户端解决方案组的radeon gpu。戴尔禁止销售的“amd isg”产品包括instinct mi210、
    的头像 发表于 12-04 09:37 683次阅读