0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

异构+Chiplet—通往数据中心的能效之路

奇异摩尔 来源:奇异摩尔 2023-06-21 15:50 次阅读

随着以大模型为代表的AIGC迅速崛起,数据到算力需求的持续暴涨,为数据中心带来了巨大的考验。为填补算力鸿沟,下一代数据中心必须要具备更高的算力密度、更大的网络规模,并能够灵活地部署和更新海量新应用。

在这一轮新的技术方向中,异构计算架构和Chiplet技术因能有效提升复杂场景计算效率,算力密度和网络规模,被普遍视为通往数据中心未来的能效之路。

AIGC或将撕开数据中心算力缺口

在AI大模型飞速发展之下,单个大语言训练驱动AI训练服务器需求约2亿美元,AI推理服务器方面,如ChatGPT在初期便可带动推理服务器需求约45亿美元。

据中国信通院,2021年国内IDC市场规模1500.2亿元,同比增长28.5%。据信通院预计,随着我国各地区、各行业数字化转型深入推进、AI训练需求持续增长、智能终端实时计算需求增长,2022年国内市场规模将达1900.7亿元,同增26.7%。

算力作为大模型的核心引擎,计算方式简单粗暴,即实际拥有多少的GPU芯片,将直接决定其算力的大小。以ChatGPT为例,其模型计算主要基于微软的Azure云服务进行,本质上是借助微软自有的IDC资源,在云端完成计算过程后,再将结果返回给OpenAI。

AIGC所需的算力不是固定的,而是逐次递增的。数据中心是承接AI计算需求的直接形式,其算力需求为AIGC的能力所驱动,也就是AIGC越聪明,其背后所需要的算力就越多,而供需双方存在的现实差距,则让数据中心的算力缺口变得愈加严重。

互联网厂商布局ChatGPT同类产品,或将加大核心城市IDC算力供给缺口。艾瑞咨询数据显示,2021年国内IDC行业下游客户占比中,互联网厂商居首位,占比为60%,国内核心城市IDC算力供给缺口或将加大。

AIGC时代,智能算力崛起

随着人工智能进入新的发展周期,以及大模型的兴起,传统的芯片需求结构发生了变化。尽管总体算力仍在增长,但通用计算力由CPU主导的比例正在下降,而智能计算力由GPU主导的比例逐渐增加。

目前,GPU在AI芯片市场的占比约为90%。根据VMR的数据,2021年全球GPU行业市场规模为334.7亿美元,随着大型模型训练的成熟,预计到2030年将达到4773.7亿美元,年均增长率为34.35%。

新华三集团副总裁、计算存储产品线总裁徐润安在接受媒体采访时表示,智能算力占比变大原因在于,x86架构CPU单核性能强、通用性好。但AI场景需要多核、高并发、高带宽芯片。综合考虑成本、效率,GPU、DPU、NPU通常表现更好。CPU部分职能被其他专用芯片分担。在他看来,大模型会带来巨大的智能算力消耗。

Chiplet:破局数据中心未来

近20年中,单一的制程微缩已被证明无法赶上对性能需求的步伐。尤其是在数据中心,情况远比客户端产品更为复杂,一个非常典型的情况是多个客户端在同一产品上运行工作负载,如多核CPU或GPU。于是,人们开始将未来依托在将计算单元、内存等和其他模块成在同一封装上的Chiplet异构集成路线之上。

Chiplet架构对于服务器处理器而言意义非凡,大大降低了处理器的开发门槛和成本,起到了巨大的推动作用。正如AMD开创性的chiplet产品所证明的那样,转向chiplet技术可以显著改善数据中心的计算成本,并提高互连效率。迄今,全球主流服务器芯片厂商都开始将chiplet纳入自身产品的主要路径之一。

就此,英特尔 IO 技术解决方案团队战略家Kurt Lender 总结了 chiplet 技术的影响“有合理的预期,未来 10 年的 HPC 采购将利用 chiplet 技术更好地支持他们的科学工作负载。” AMD 的 CEO Lisa Su也表现出了同样的期待,当被问及她是否认为未来 10 年的 HPC 采购指定定制chiplet设计的计算芯片而不是现成的商品时,她回答“是”。

Kurt Lender 表示,创建基于 UCIe 的chiplet 设计在成本方面具有显著的优势,“有各种纵向扩展和横向扩展的成本优势,包括由于与单片硅设计相比占地面积更小而导致chiplet的高良率而节省的成本,以及能够指定可以利用 HPC 冷却功能的高密度、高功率封装。在其最完整的表达中,基于chiplet 的架构使设计人员能够将来自多个供应商的 IP 和不同职称工艺技术的芯粒快速集成到一个封装中。”

关于随着以大模型为代表的人工智能大规模计算的迅速崛起,数据中心的算力难题不断加剧。而异构和Chiplet会将数据中心的未来引向何处,还让我们拭目以待。‍‍‍‍‍‍‍




审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • GPU芯片
    +关注

    关注

    1

    文章

    304

    浏览量

    5990
  • OpenAI
    +关注

    关注

    9

    文章

    1184

    浏览量

    6930
  • chiplet
    +关注

    关注

    6

    文章

    438

    浏览量

    12688
  • 奇异摩尔
    +关注

    关注

    0

    文章

    49

    浏览量

    3573
  • ChatGPT
    +关注

    关注

    29

    文章

    1579

    浏览量

    8308
  • 先进封装
    +关注

    关注

    2

    文章

    437

    浏览量

    349
  • 芯粒
    +关注

    关注

    0

    文章

    59

    浏览量

    170

原文标题:异构+Chiplet,通往数据中心的能效之路

文章出处:【微信号:奇异摩尔,微信公众号:奇异摩尔】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    数据中心困局怎么解?这份方案给出妙方

    数据中心困局怎么解?这份方案给出妙方
    的头像 发表于 03-14 08:05 34次阅读
    <b class='flag-5'>数据中心</b><b class='flag-5'>能</b><b class='flag-5'>效</b>困局怎么解?这份方案给出妙方

    解锁数据中心效能密码:一站式综合管理方案

    解锁数据中心效能密码:一站式综合管理方案
    的头像 发表于 03-08 08:13 55次阅读
    解锁<b class='flag-5'>数据中心</b>效能密码:一站式综合<b class='flag-5'>能</b><b class='flag-5'>效</b>管理方案

    数据中心发展与改造

    全球多数数据中心基础设施已超六年,能耗高而效率低。随着AI的发展,企业正致力于整合与提升的现代化改造。同时数据中心呈现规模化、高密化、绿色化发展趋势。19821800313 一、目
    的头像 发表于 02-28 16:50 149次阅读
    <b class='flag-5'>数据中心</b>发展与改造

    安科瑞:以综合管理解决方案,赋能人工智能时代的数据中心可持续发展

    在人工智能与可持续发展的双重浪潮下,安科瑞凭借其综合管理解决方案,不仅为数据中心行业提供了降本增效的实践路径,更推动了全球数字基础设施向绿色低碳转型。未来,随着技术的持续迭代与生态合作的深化,安科瑞有望成为AI时代
    的头像 发表于 02-21 15:37 183次阅读
    安科瑞:以综合<b class='flag-5'>能</b><b class='flag-5'>效</b>管理解决方案,赋能人工智能时代的<b class='flag-5'>数据中心</b>可持续发展

    安森美推动数据中心革新

    随着数据中心为了满足人工智能(AI)计算的庞大处理需求而变得越来越耗电,提高能变得至关重要。与一般的搜索引擎请求相比,搭载AI的引擎需要消耗超过10倍的电力。加快功率半导体的创新以改善
    的头像 发表于 11-14 09:41 344次阅读

    安科瑞综合管理系统在数据中心的应用

    安全的供配电2)绿色低碳、节能降耗、提升PUE3)提高运维效率、降低运营成本4)整体监控平台三、解决方案如下为AcrelEMS-IDC数据中心综合管理系统的驾驶舱导览图,根据能源流向、信息流向及电压等级变化
    的头像 发表于 11-06 16:04 271次阅读

    数据中心管理系统对配电系统、能耗、温度、蓄电池等运行状态实时监测

    数据中心综合管理系统采集数据中心中低压配电系统、环境等数据,通过实时监测、控制和预警可以帮助数据中心
    的头像 发表于 08-22 10:09 614次阅读
    <b class='flag-5'>数据中心</b><b class='flag-5'>能</b><b class='flag-5'>效</b>管理系统对配电系统、能耗、温度、蓄电池等运行状态实时监测

    安森美引领数据中心革命

    在当今数字化转型的浪潮中,数据中心作为支撑人工智能、云计算等关键技术的基础设施,其能耗问题日益凸显。特别是随着AI计算的蓬勃发展,数据中心对电力的需求急剧增加,传统搜索引擎请求相比,AI引擎的电力消耗更是高达十倍以上。因此,提升数据中心
    的头像 发表于 08-12 11:13 593次阅读

    安森美推出提高数据中心的完整电源解决方案

    650V MOSFET的强大组合为数据中心应用提供了一种完整解决方案,该方案在更小的封装尺寸下提供了无与伦比的和卓越的热性能。
    的头像 发表于 06-13 11:01 669次阅读

    安森美新一代技术助力数据中心提升

    在人工智能飞速发展的当下,数据中心为了满足日益增长的计算需求,正面临巨大的电力挑战。的提高成为行业关注的焦点,而安森美作为半导体技术的领先者,正通过其最新技术为数据中心提供解决方案
    的头像 发表于 06-11 09:56 513次阅读

    安科瑞数据中心综合管理解决方案—中国移动内蒙古某项目案例分享

    源消耗的2%左右。为了应对这一问题,数据中心需要采取综合管理措施,以降低能源消耗、提高资源利用率、降低运营成本。安科瑞数据中心综合
    的头像 发表于 05-08 11:05 817次阅读
    安科瑞<b class='flag-5'>数据中心</b>综合<b class='flag-5'>能</b><b class='flag-5'>效</b>管理解决方案—中国移动内蒙古某项目案例分享

    数据中心UPS系统运行能耗优化探讨与应用

    摘要:数据中心UPS系统合理的运行方式对数据中心的管理和运行具有十分重要的意义,PUE、pPUE、CLF/PLF、RER是通用的衡量数据中心
    的头像 发表于 04-11 15:36 651次阅读
    <b class='flag-5'>数据中心</b>UPS系统运行能耗优化探讨与应用

    浅析我国数据中心配电系统的能耗及水平

    浅析我国数据中心配电系统能耗及水平 张颖姣 安科瑞电气股份有限公司 上海嘉定201801 摘要:伴随着互联网技术的深入全面发展,在“互联网+”的时代,信息化进程日益加快,我国数据中心
    的头像 发表于 04-09 16:09 433次阅读
    浅析我国<b class='flag-5'>数据中心</b>配电系统的能耗及<b class='flag-5'>能</b><b class='flag-5'>效</b>水平

    #mpo极性 #数据中心mpo

    数据中心MPO
    jf_51241005
    发布于 :2024年04月07日 10:05:13

    #mpo光纤跳线 #数据中心光纤跳线

    光纤数据中心
    jf_51241005
    发布于 :2024年03月22日 10:18:31