0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

大模型非GPU专属 AMD EPYC秀出CPU AI实力

微云疏影 来源:综合整理 作者:综合整理 2023-12-07 15:51 次阅读

12月6日,amd在加利福尼亚州圣何塞举行的“advancing ai”活动中发布了一系列创新产品,包括mi300、Ryzen ai pc处理器。作为amd未来发展的关键,amd试图在所有产品线上实现ai功能,从大规模数据中心训练和推理解决方案到面向消费者的电脑和游戏体验。

amd在高性能计算(hpc)和数据中心领域显示出持续的领导能力。amd epyc处理器和amd instinct加速器仍然是世界上许多最创新、最节能、最快的超级计算机的基本解决方案。

根据世界超级计算机排名第62届top500,全体500个超级电脑套装的amd平台为140个,比前年增加了39%。此外,amd根据green500的最新名单,为世界上能源效率最高的10台超级计算机中的8台提供了电力。

目前,橡树国家实验室使用amd epyc处理器和安装加速器驱动最先进的超级计算机,劳伦斯利弗莫尔国家实验室也开始安装超大型超级计算机el capitan。

今天amd发布了第一个ai/hpc数据中心apu——mi300a,并将zen3 cpu和cdna3 gpu整合到一个芯片中,使用了hbm3内存和第四代infinity fabric高速总线的相互连接。这样可以简化结构,简化程序设计。

据amd介绍,apu具有充分利用集成架构优势的性能潜力。统一内存,统一内存,共享的infinity母线技术,动态功耗分布及程序设计上的便利性等。

由于这些优点,mi300a在openfoam上的工作效率是h100的4倍。peakhpc每瓦的性能比gh200高出2倍。

在hpc等性能上也与h100相似或领先。随着mi300a的增加,El Capitan将成为世界上第一台具备2 exaplop(100亿次)分配密度的超级电脑,同时也将成为世界上最快的超级计算机。

此外,EPYC本身也能够具备强大的AI能力。在今年6月份举办的“数据中心与AI技术首映”上,AMD针对云原生负载进行了优化,带来了以吞吐量为导向,拥有最高终端密度和效率的AMD EPYC 9704处理器“Bergamo”,以及面向技术计算领域的Genoa-X。其中,Genoa-X的亮点包括领先的5nm工艺节点技术、高达96个高性能Zen4核心、高达1.1GB的L3 Cache,兼容SP5插槽等,可以在Ansys CFX中每天完成更多的设计任务,从而大幅加速产品开发。

在今日活动的演示现场,记者看到采用 AMD EPYC 9654处理器运行Llama 2大语言模型的展示,在同竞品Xeon Platinum 8480的对比中,处理运行速度提升36%。这意味着,在某些场景下,依靠CPU提供的AI算力也能够进行大模型处理,而非仅依靠GPU,这对于具有较少GPU资源的企业而言非常具有吸引力,也带来了成本上的节省。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • amd
    amd
    +关注

    关注

    25

    文章

    5419

    浏览量

    133793
  • 加速器
    +关注

    关注

    2

    文章

    789

    浏览量

    37663
  • 超级计算机
    +关注

    关注

    2

    文章

    459

    浏览量

    41901
收藏 人收藏

    评论

    相关推荐

    为什么ai模型训练要用gpu

    GPU凭借其强大的并行处理能力和高效的内存系统,已成为AI模型训练不可或缺的重要工具。
    的头像 发表于 10-24 09:39 174次阅读

    【「算力芯片 | 高性能 CPU/GPU/NPU 微架构分析」阅读体验】--全书概览

    1章 从TOP500和MLPerf看算力芯片格局 1.1科学算力最前沿TOP500 1.2 AI算力新标准 第2章 高性能 CPU 流水线概览 2.1什么是指令 2.2 流水线与MIPS 2.3
    发表于 10-15 22:08

    三星首度引入AMD MI300X,缓解AI GPU短缺

    三星电子近日斥资约270亿韩元(约合1.42亿元人民币),购买了AMD Instinct MI300X加速器。这一举措标志着三星电子首次引入英伟达品牌的AI GPU,以应对企业内部算
    的头像 发表于 10-10 17:15 410次阅读

    AMD EPYC 4004系列处理器成为中小型企业的信赖选择

    AMD宣布推出AMD EPYC(霄龙) 4004系列处理器,该系列处理器以全新且经过成本优化的产品补充了现有AMD EPYC服务器
    的头像 发表于 09-20 15:30 217次阅读

    AMD全新处理器扩大数据中心CPU的领先地位

    在Computex 2024 开幕主题演讲上,AMD 详细介绍了全新的 CPU、NPU 和 GPU 领先架构,为从数据中心到个人电脑的端到端 AI 基础架构带来强大算力。
    的头像 发表于 09-19 11:01 443次阅读

    第五代AMD EPYC处理器预计下半年发布

    近日,在Computex 2024上,AMD董事会主席及首席执行官Lisa Su博士向大家预览了具有超强性能的下一代 EPYC 处理器——第五代 AMD EPYC 处理器(代号“Tur
    的头像 发表于 09-18 11:06 540次阅读

    AMD推出全新AMD锐龙和EPYC处理器,扩大数据中心和PC领域领先地位

    ——下一代 AMD EPYC 处理器将扩大数据中心 CPU 的领先地位 ——全新 AMD 锐龙 AI 300 系列笔记本电脑和 
    的头像 发表于 06-04 19:21 934次阅读
    <b class='flag-5'>AMD</b>推出全新<b class='flag-5'>AMD</b>锐龙和<b class='flag-5'>EPYC</b>处理器,扩大数据中心和PC领域领先地位

    为什么跑AI往往用GPU而不是CPU

    GPU的能力,并且支持的GPU数量越多,就代表其AI性能越强大。那么问题来了,为什么是GPU而不是CPU
    的头像 发表于 04-24 08:27 1719次阅读
    为什么跑<b class='flag-5'>AI</b>往往用<b class='flag-5'>GPU</b>而不是<b class='flag-5'>CPU</b>?

    AI训练,为什么需要GPU

    随着由ChatGPT引发的人工智能热潮,GPU成为了AI模型训练平台的基石,甚至是决定性的算力底座。为什么GPU能力压CPU,成为炙手可热
    的头像 发表于 04-24 08:05 1075次阅读
    <b class='flag-5'>AI</b>训练,为什么需要<b class='flag-5'>GPU</b>?

    AMD EPYC 8004系列处理器优势介绍

    AMD EPYC 8004系列处理器就是专为单路平台设计的高能效处理器,它体积小巧,非常适合空间和功率有限的部署环境。
    发表于 04-15 11:30 328次阅读
    <b class='flag-5'>AMD</b> <b class='flag-5'>EPYC</b> 8004系列处理器优势介绍

    国产GPUAI模型领域的应用案例一览

    电子发烧友网报道(文/李弯弯)近一年多时间,随着大模型的发展,GPUAI领域的重要性再次凸显。虽然相比英伟达等国际大厂,国产GPU起步较晚、声势较小。不过近几年,国内不少
    的头像 发表于 04-01 09:28 3625次阅读
    国产<b class='flag-5'>GPU</b>在<b class='flag-5'>AI</b>大<b class='flag-5'>模型</b>领域的应用案例一览

    AMD EPYC处理器:AI推理能力究竟有多强?

    如今,AMD EPYC处理器已经成为最常被选择用于AI推理的服务器平台,尤其是第四代Genoa EPYC 9004系列,执行AI推理的能力又
    发表于 03-15 09:47 412次阅读

    AMD第四代EPYC(霄龙)系列处理器介绍

    与上一代AMD EPYC 7763处理器相比,AMD EPYC 9534处理器搭载的“Zen 4”核心可将整数性能与浮点性能分别提升约45%和75%,从而释放热度范围,提供更多算力。
    发表于 01-29 12:25 1793次阅读

    AMD Instinct加速器、AMD EPYC处理器为Microsoft带来全新AI和计算能力

    VM —   近日,在Microsoft Ignite全球技术大会上,AMD和Microsoft共同展示了包括即将到来的AMD Instinct加速器、AMD EPYC(霄龙)
    的头像 发表于 12-04 13:54 566次阅读

    AMD扩展其第三代AMD EPYC处理器家族并推出6款全新产品

    AMD加强广受好评的第三代EPYC CPU产品组合,为支持主要业务基础设施的服务器提供性能和能效— —包括Cisco、Dell Technologies、Gigabyte、HPE、Lenovo
    的头像 发表于 11-11 10:37 1268次阅读