0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

再发三大服务器芯片,自研实力愈发强悍的亚马逊

lPCU_elecfans 来源:未知 2022-12-06 07:20 次阅读
电子发烧友网报道(文/周凯扬)在近期举办的Re:Invent大会上,亚马逊为其AWS云服务公布了上线全新的EC2实例,分别是C7gn、HPC7g和R7iz。R7iz用到了英特尔最新的第四代Xeon Scalable处理器Sapphire Rapids,而HPC7g则是由新处理器Graviton3E来驱动的。与此同时,AWS还在本次会议上公布了第五代Nitro芯片Nitro v5和第二代推理芯片AWS Inferentia 2,其中Graviton3E和Nitro v5都是基于Arm架构打造的。

性能更上一层楼的Graviton3E

在HPC领域,Arm的出镜率还是比较低的,除了像富岳超算这样的顶级存在外,我们很少看到云服务厂商基于Arm芯片来打造HPC计算集群,Graviton的出现可谓改变了这一点。AWS在2020年推出的C6gn实例,就是基于其Graviton2处理器打造的,相较基于第二代AMD EPYC处理器的C5实例,C6gn做到了成本低上20%,性能却高上40%的表现。

Graviton3E在不同负载下的性能提升 / 亚马逊
根据亚马逊给出的数据,Graviton3E在Graviton3的基础上再加改良,以测试浮点性能的基准HPL为例,Graviton3E将矢量指令处理性能再度提高了35%。而HPC7g实例相比基于Graviton2的C6gn实例,更是将浮点性能拔高至两倍,比基于第3代AMD EPYC 7003系列48核处理器的HPC6a实例,性能上也能高出20%,可以说是AWS上性价比最高的HPC实例了。
如今的亚马逊已经有了100多个不同的Graviton实例,供使用者灵活选择。而且让Graviton充分发挥作用的不仅是AWS EC2这样的弹性计算云服务,还有Fargate这样无需管理实例的服务,也获得了不小的性能提升。
然而对于大部分云服务厂商来说,他们首推的实例很多依然是基于x86的,这不禁让人深思,真的会有大型公司选择了Arm服务器芯片吗?亚马逊给出了肯定的答案,也介绍了Graviton极快的普及速度。
从亚马逊给出的合作伙伴中,我们可以看到大宇无限、Epic、Lyft、Zoom等公司,都选了围绕Graviton芯片来构造他们的产品服务。比如美国电视串流服务DirectTV在使用Graviton 3的实例后,成本减少了20%的同时,延迟也有了最高50%的降低,使得他们能在访问流量变化巨大的同时灵活扩展容量,还能保证性能不受影响。

加剧DPU和AI芯片内卷的Nitro和Inferentia

对于多数超大规模数据中心和云服务厂商来说,他们的DPU往往来自第三方,比如英伟达的BlueField、AMD的Pensando等,而亚马逊旗下的Annapurna Labs,则成了AWS DPU产品的Nitro的幕后功臣。

Nitro v5芯片 / 亚马逊
而这次Annapurna Labs设计的Nitro v5在性能上再度实现了飞跃,亚马逊展示的数据上提到,Nitro v5相较上一代集成了两倍的晶体管数目,在算力上提升近两倍,拥有快上50%的DRAM速度,PCIe带宽也提升至两倍。由此可以看出,Nitro v5应该选择了更先进的工艺,DRAM和PCIe也换成了最新一代。
在实际测试中,Nitro v5可以提高最多60%的吞吐量,降低30%的延迟,在能效比上也有了40%的提升。正是因为有着这样强大的性能,AWS选择了将其集成到C7gn、HPC7g实例中去,与Graviton3和Graviton3E一起实现200Gbps的超高网络性能。
大型语言模型的出现推动深度学习进入了下一个阶段,但庞大的参数量加大了推理所需的算力和成本。2019年,AWS的Inferentia芯片第一代出现在Inf1实例上,为用户提供了性价比优于GPU实例的选项,但彼时的深度学习模型还大多数停留在数百万个,如今某些深度学习模型的参数已经超过了数百亿,比如百度的PLATO-XL对话生成模型、亚马逊的AlexaTM等。
为此,Annapurna Labs拿出了全新的Inferentia2芯片,最高可支持到1750亿参数的大型深度学习模型。基于Inferentia2芯片的Inf2实例也首次支持到分布式推理,将大型模型分布到多个芯片上进行推理。与上一代Inf1实例相比,Inf2可以提供高达4倍的吞吐量和10分之一的延迟,与GPU实例相比更是将能效提高了50%之多。

小结

这样频繁的芯片发布节奏,足以看出亚马逊在自研服务器芯片上已经到了一个新的高度。不得不承认,亚马逊早在2016年就收购Annapurna Labs是一个多么具有前瞻性的战略决策,在云服务厂商竞争愈演愈烈的当下,拥有自研可控的服务器芯片无疑是杀手锏。虽然谷歌、阿里巴巴等厂商也都加入到了自研服务器芯片的行列中来,但与亚马逊的AWS相比,在产品阵容和布局时间上还是有所差距。

声明:本文由电子发烧友原创,转载请注明以上来源。如需入群交流,请添加微信elecfans999,投稿爆料采访需求,请发邮箱huangjingjing@elecfans.com。


更多热点文章阅读

  • 马斯克:预计6个月后进行大脑芯片的人体试验,愿意给自己孩子植入
  • 硅料降价拐点来临,光伏市场有望重启装机潮
  • 造车新势力11月销量:哪吒第一,蔚理进前三,小鹏依旧垫底
  • 行业机构频发警报 2023年全球半导体市场面临下滑风险
  • 富士康失去iPhone 14 Pro独家代工资格!立讯和硕上位,果链格局大变?


原文标题:再发三大服务器芯片,自研实力愈发强悍的亚马逊

文章出处:【微信公众号:电子发烧友网】欢迎添加关注!文章转载请注明出处。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

原文标题:再发三大服务器芯片,自研实力愈发强悍的亚马逊

文章出处:【微信号:elecfans,微信公众号:电子发烧友网】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    苹果5G芯片或于明年亮相

    苹果公司正加速推进其5G芯片的研发进程,有望最快在明年推出首款5G调制解调。这一举措对
    的头像 发表于 11-12 15:24 249次阅读

    比亚迪最快于11月实现算法量产,推进智驾芯片进程

    10月21日市场传出消息,比亚迪正计划整合其新技术院下的智能驾驶团队,目标是在今年11月实现智能驾驶算法的量产,并持续推进智能驾驶芯片
    的头像 发表于 10-22 15:57 781次阅读

    亚马逊AWSAI芯片崛起,挑战英伟达

    近期,据路透社独家报道披露,在德克萨斯州奥斯汀市一处紧密防守的芯片实验室中,六位来亚马逊AWS的工程师正在对一种尚未公开透露名称及详细参数的新型服务器展开深入测试。这一关键事件引人注
    的头像 发表于 07-27 14:33 1009次阅读

    亚马逊正测试一款融入AI芯片的新型服务器设计

    在得克萨斯州奥斯汀的秘密芯片实验室中,亚马逊正紧锣密鼓地测试一款高度保密的新型服务器设计,该设计融入了亚马逊自主研发的AI芯片,旨在与业界巨
    的头像 发表于 07-26 14:21 513次阅读

    苹果计划搭建芯片驱动的AI数据中心

    据内部人士透露,苹果已将自芯片应用于云计算服务器,用以支持其设备未来的高级AI服务。目前我们尚未收到苹果方面对此事的回应。
    的头像 发表于 05-10 16:31 466次阅读

    高通服务器芯片"SD1"揭晓,核心搭载Oryon

    据国外科技媒体Android Authority透露,高通公司在公布骁龙X Elite / Plus芯片之后,内部正在研发代号为“SD1”、内置Oryon处理服务器芯片
    的头像 发表于 04-26 10:16 579次阅读

    苹果AI服务器芯片,预计2025年台积电3nm工艺

    4 月 24 日,知名数码博主@手机晶片达人发布动态,爆料苹果正研发自家 AI 服务器芯片,预计 2025 年下半年量产,采用台积电 3nm 制程。
    的头像 发表于 04-24 11:00 839次阅读

    linux服务器和windows服务器

    Linux服务器和Windows服务器是目前应用最广泛的两种服务器操作系统。两者各有优劣,也适用于不同的应用场景。本文将 对Linux服务器和Windows
    发表于 02-22 15:46

    微软正在研发新型网卡,旨在提升AI芯片性能

    微软近日被曝正在秘密研发一款高性能的新型网卡,这一创新旨在增强其的Maia AI服务器芯片的功能,并可能大幅度降低对外部芯片设计厂商如英
    的头像 发表于 02-21 11:01 705次阅读

    独立服务器和云服务器的区别

    独立服务器和云服务器的区别是很多用户在选择服务器时要做的课程,那么独立服务器和云服务器的区别有哪些呢?
    的头像 发表于 01-17 10:58 808次阅读

    苹果Wi-Fi芯片之路充满挑战

    据悉,苹果在5G调制解调芯片上投入了大量资金,如今希望在Wi-Fi
    的头像 发表于 12-26 14:46 716次阅读

    边缘计算新篇章:亚马逊云科技海外服务器服务成就全球创新

    2022年亚马逊云科技re:Invent盛会于近日在拉斯维加斯成功召开,吸引了众多业界精英和创新者。亚马逊云科技边缘服务副总裁Jan Hofmeyr在演讲中分享了关于亚马逊云科技海外
    的头像 发表于 12-21 15:45 430次阅读
    边缘计算新篇章:<b class='flag-5'>亚马逊</b>云科技海外<b class='flag-5'>服务器</b><b class='flag-5'>服务</b>成就全球创新

    服务生态演进:亚马逊云科技轻量应用服务器应对复杂需求

    难度、使用和管理流程,提供了独立的产品控制台,并一站式融合了常用基础云服务,是众多企业上云的理想选择。 随着轻量应用服务器的逐渐兴起,各大服务器提供商也开始在这一领域加大投入。Amazon Lightsail作为
    的头像 发表于 12-21 09:06 523次阅读
    云<b class='flag-5'>服务</b>生态演进:<b class='flag-5'>亚马逊</b>云科技轻量应用<b class='flag-5'>服务器</b>应对复杂需求

     物理服务器和大宽服务器怎么选

    种形式,分别是塔式服务器、机架服务器、刀片服务器,它们每一种的应用场景均不同。例如,如果空间不够大,可以选择塔式服务器
    的头像 发表于 12-20 10:50 546次阅读

    亚马逊再发两款芯片,训练芯片时隔年迎来更新

    时隔数年终于更新的Trainium2。   第四代Arm服务器CPU   从2018年11月,到今年的11月,Gravition这一亚马逊
    的头像 发表于 11-30 00:09 1536次阅读