0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

AI训练狂飙,DDR5集成PMIC护航,内存技术持续助力

花茶晶晶 来源:电子发烧友网 作者:黄晶晶 2024-07-04 09:09 次阅读

电子发烧友网报道(文/黄晶晶)AI训练数据集正高速增长,与之相适应的不仅是HBM的迭代升级,还有用于处理这些海量数据的服务器内存技术的不断发展。

以经过简化的AI训练管道流程来看,在数据采集进来后的数据存储阶段对主内存的需求以小于1TB来计算(实际应用中一个集群或实例的内存容量会是简化模型的数倍。),这时GPU还无须参与训练中。

到了数据准备阶段,将数据进行整理、验证,此时主内存容量上升到1TB。比如SDXL训练网络架构,在数据准备阶段,所有的图像都要被规整成统一的规格、大小、像素、尺寸,从而更加高效的利用到网络中的这些资源,降低延迟和在空间展示中节省资源。

在AI训练阶段,不仅需要强大的GPU内存,主内存的容量需求会是GPU内存的两倍,且必须有非常高的带宽,才能让GPU本地内存满足数据的吞吐速度。由此可见,DDR5内存对于AI训练的重要性。


Rambus为 DDR5 服务器内存模块提供完整的内存接口芯片组,包含 RCD、PMIC、SPD Hub、温度传感器 IC。Rambus最近推出最先进的全新DDR5 服务器电源管理IC(PMIC)系列,包含适用于高性能应用的业界领先超高电流电源器件,满足AI及其他高级工作负载对最高性能与容量内存模块的需求。

Rambus DDR5服务器PMIC产品特点


PMIC是DDR5内存架构中的关键组件,可实现更多的内存通道、更大容量的模组和更高的带宽。Rambus DDR5服务器PMIC系列包含符合JEDEC超高电流(PMIC5020)、高电流(PMIC5000)和低电流(PMIC5010)规范的产品。

JEDEC定义了三种不同的PMIC,针对不同的电流输出水平。它们都共享相同的封装尺寸、引脚布局,并且大多数寄存器集相同。每种设计的电源效率都针对其目标应用的预期电流水平进行了优化。

极高电流的PMIC 5020目标是约30安培的最大持续直流电流,是这三种服务器PMIC中最新定义的。Rambus是首家提供样品的公司。该PMIC针对的是最高带宽和最高容量的模块。

高电流PMIC 5000一直是主要的PMIC,支持的最大持续直流电流大约为20安培。这款特定的PMIC针对标准到四阶模块,容量为64GB、96GB和128GB。低电流 PMIC 5010 面向容量较低的市场,它支持的最大持续电流约为 12 安培。

大多数速率高达 60,400 MT/s 的 DDR5 RDIMM 都使用 PMIC 5000 高电流版本和 PMIC 5010 低电流版本 PMIC。目前这两种型号正处于大批量生产阶段。

而新发布的PMIC5020,主要用于数据速率达到7200MT/s的第四代DDR5,以及第一代的MRDIMM模组,另外,还包括一些6400MT/s数据速率但容量特别高的如256GB内存模组,也会使用超高电流的PMIC5020。

Rambus内存互连芯片业务部门产品营销副总裁John Eble表示,Rambus提供完整的DDR5 RDIMM芯片组,对于我们的客户、客户的用户,以及整个生态系统是多赢的。对于DDR5 RDIMM完整芯片组,我们是经过预先验证的,可以带给客户具有经过验证的互操作性和非常优秀的时序、功率优化,而且也有足够稳健的供应链供给。

设计挑战


应用DDR5技术的DIMM架构如何实现更高的内存性能。John Eble进行了详细解析。

现在DDR5内存已经开始转移到双通道架构,在展现的DDR5 RDIMM架构在DDR5当中数据流的通道比特率是32,另外加上8位ECC,来保证他们在连接器上有着各自所需的存储和吞吐量以及内存性能。



上图中的双通道 RCD 现在在主机端以 DDR5 速度运行。因此它的运行速度与 DRAM 相同。图中每个引脚的开关频率将比DDR4高出一倍多。

DDR5的每通道最高频率速度达到8400MT/s。但实际上根据JEDEC今年4月发布的最新数据,表示在DRAM的规格当中可以达到8800MT/s的速度。

更高的数据传输速率(裕度至关重要),所有这些数据信号所需的连接器引脚数量的增加以及主电源电压从 1 至 1.2 伏降至 1.1 伏,这些因素共同促使决定采用专用的电源管理IC,帮助控制更加精细的电压。

DDR5模块增加了PMIC和相关的无源组件,这是DDR4到DDR5最显著的变化之一。

通过将电源管理集成到内存模块(DIMM)上,主板可以为内存模块提供单一的高电压电源。由内存模组上的PMIC向模组提供输入高压12V电源,避免通过模块连接器从主板向内存模组组件输出如1V的电压,大大降低了输电网络上的IR下降问题。

PMIC有四个开关降压调节器,其中两个采用双相配置,两个低压差调节器,为模块上的各种组件产生总共五个不同的电压供应和电压水平。

PMIC可以针对其所在的特定模块进行调整。随着用户增加内存容量,他们以递增的方式为服务器添加电源管理。因此,将PMIC集成到内存模块上极大地简化主板设计,减少所需的面积,并降低电源系统过度配置的浪费。

为了实现更高的数据传输速率,DDR5需要更严格且精准的电压范围。在电源配置变化的情况下,它需要非常低的噪音,要在较低电压下保持可靠性。

电源设计上的挑战来看,首先是散热问题。PMIC会产生热量,而且它靠近对热非常敏感的DRAM。因此,进行热模拟并确保热量以一种不会影响模块的方式消散,这一点非常重要。

第二个设计挑战是如何将PMIC及其无源元件安装在模块上,因为模块的尺寸是固定的。模块上已经有很多元器件。因此为PMIC腾出空间,确保其功率完整性达到最佳状态,并确保其不会造成任何干扰或散热问题,这是一个很大的挑战。

第三个挑战是确保PMIC上的开关稳压器不会将任何不需要的噪声引入DIMM的其他部分。

最后是需要确保PMIC可靠且强大。Rambus 专门内置了特殊电路来处理可能的压力条件,以确保拥有非常强大的部件。

凭借在高性能内存领域积累30多年的经验,Rambus已成为RDIMM制造商的“一站式” DDR5 内存接口芯片供应商,能够为制造商提供最高级别的验证保证并加快其产品上市时间。

中国市场


中国内存市场蓬勃发展,已经形成了内存颗粒、内存模组、服务器、OEM、ODM、云一套连贯的生态链,中国在全球的内存生态里扮演着非常重要的一环。

Rambus大中华区总经理苏雷表示,Rambus中国的业务理念不单单把自己作为一个产品的供应方,更多的是定位成业务的合作伙伴,助力中国内存整个产业链的生态发展。我们通过跟内存上下游合作伙伴的紧密协同工作,通过利用Rambus内存产品方面的经验和积累去服务好中国市场。

无论是在客户产品布局,还是产品设计、研发问题定位、甚至量产阶段,Rambus通过提供高效、优质的产品和全面、细致的技术服务与行业经验,来践行“in China for China”的理念,最终实现跟客户的成长与共赢。

写在最后

John Eble对DDR5和PMIC发展情况做一些预判。随着对更高性能和电源效率的需求不断增长,未来可能会定义新型内存模块。现在业界已经经历了将 PMIC 集成到模块验证和认证中的学习曲线,并看到了由此带来的好处。那么,很有可能会继续在模块上集成PMIC,以进一步优化电源管理并提高整体系统性能。这将成为一种趋势。

DDR5 在服务器和个人电脑领域都得到了相当迅速的采用。在服务器方面也即将达到平衡点。据集邦咨询的报告,预计下个季度DDR5 普及率将超过 50%。

另外,PMIC 供应对DDR5服务器模块来说非常重要。早前曾出现过PMIC 短缺的问题,不过现在整个供应链已经恢复,目前没有看到PMIC供应短缺的情况。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 服务器
    +关注

    关注

    12

    文章

    8352

    浏览量

    83567
  • 内存
    +关注

    关注

    8

    文章

    2804

    浏览量

    73142
  • PMIC
    +关注

    关注

    15

    文章

    264

    浏览量

    109056
  • Rambus
    +关注

    关注

    0

    文章

    54

    浏览量

    18742
  • AI
    AI
    +关注

    关注

    87

    文章

    27605

    浏览量

    265208
  • DDR5
    +关注

    关注

    1

    文章

    394

    浏览量

    23931
收藏 人收藏

    评论

    相关推荐

    Rambus 通过 DDR5 服务器 PMIC 扩展适用于高级数据中心内存模块的芯片组

    提供业界领先的 DDR5 服务器 PMIC,满足AI及其他高级工作负载对最高性能与容量内存模块的需求 通过全新PMIC系列支持多代基于
    发表于 06-21 11:29 129次阅读
    Rambus 通过 <b class='flag-5'>DDR5</b> 服务器 <b class='flag-5'>PMIC</b> 扩展适用于高级数据中心<b class='flag-5'>内存</b>模块的芯片组

    Rambus通过全新PMIC系列支持多代基于 DDR5 的高性能服务器

    提供业界领先的 DDR5 服务器 PMIC,满足AI及其他高级工作负载对最高性能与容量内存模块的需求 通过全新PMIC系列支持多代基于
    的头像 发表于 06-20 15:13 510次阅读

    适用于DDR5 On-DIMM 电源的TPS53832集成式数字降压转换器数据表

    电子发烧友网站提供《适用于DDR5 On-DIMM 电源的TPS53832集成式数字降压转换器数据表.pdf》资料免费下载
    发表于 03-29 10:03 2次下载
    适用于<b class='flag-5'>DDR5</b> On-DIMM 电源的TPS53832<b class='flag-5'>集成</b>式数字降压转换器数据表

    适用于DDR5 On-DIMM电源的TPS53830集成式数字降压转换器 数据表

    电子发烧友网站提供《适用于DDR5 On-DIMM电源的TPS53830集成式数字降压转换器 数据表.pdf》资料免费下载
    发表于 03-29 10:01 0次下载
    适用于<b class='flag-5'>DDR5</b> On-DIMM电源的TPS53830<b class='flag-5'>集成</b>式数字降压转换器 数据表

    DDR5内存接口芯片组如何利用DDR5 for DIMM的优势?

    2021 年,JEDEC 宣布发布 JESD79-5 DDR5 SDRAM 标准,标志着行业向 DDR5 dual-inline memory modules (DIMM) 的过渡。
    的头像 发表于 03-17 09:50 1387次阅读
    <b class='flag-5'>DDR5</b><b class='flag-5'>内存</b>接口芯片组如何利用<b class='flag-5'>DDR5</b> for DIMM的优势?

    DDR6和DDR5内存的区别有多大?怎么选择更好?

    DDR6和DDR5内存的区别有多大?怎么选择更好? DDR6和DDR5是两种不同的内存
    的头像 发表于 01-12 16:43 5655次阅读

    lpddr5时序比ddr5慢多少

    LPDDR5DDR5是两种不同类型的内存,它们在时序和性能方面有一些差异。尽管它们都是最新一代的内存标准,但它们面向不同的应用场景,并且在设计上有一些不同。 首先,让我们来了解一下L
    的头像 发表于 01-04 10:22 2557次阅读

    影驰HOF PRO DDR5 7000内存详细评测报告

    在最为重要的内存颗粒上,根据软件检测,这款内存采用了编号为“H5CG48AEBDX018”的SK海力士A-die颗粒,与市面上大部分DDR5 7600、
    发表于 01-02 14:37 450次阅读
    影驰HOF PRO <b class='flag-5'>DDR5</b> 7000<b class='flag-5'>内存</b>详细评测报告

    DDR5 SDRAM规范

    JESD79-5B DDR5 SDRAM-2022 JEDEC
    发表于 12-25 09:51 14次下载

    ddr5为什么能跑得那么稳呢

    随着DDR5信号速率的增加和芯片生产工艺难度的加大,DRAM内存出现单位错误的风险也随之增加,为进一步改善内存信道,纠正DRAM芯片中可能出现的位错误,DDR5引入了片上ECC
    发表于 11-30 14:49 189次阅读
    <b class='flag-5'>ddr5</b>为什么能跑得那么稳呢

    高效边缘计算解决方案:研华工业内存 SQRAM DDR5 5600 系列

      研华推出 SQRAM DDR5 5600 系列工业内存。该系列紧跟计算机内存全新风潮,支持DDR5, 数据传输速度高达5600MT/s 。SQRAM 5600 系列的速度快如闪电,
    发表于 11-02 16:26 626次阅读
    高效边缘计算解决方案:研华工业<b class='flag-5'>内存</b> SQRAM <b class='flag-5'>DDR5</b> 5600 系列

    美光利用1β工艺技术提供高速7,200 MT/s DDR5内存

    随着数据中心工作负载所需cpu核心数量的增加,对更高内存带宽和容量的要求增加,克服了“内存墙”问题,优化了总拥有费用。美光公司的 1β DDR5 DRAM 可以进一步扩展性能,支持数据中心和客户端平台之间的人工智能(
    的头像 发表于 10-13 10:55 745次阅读

    XMP DDR5 8000内存性能测试详解

    在全默认设置的情况下,影驰HOF OC Lab幻迹S DDR5 8000内存的工作速率为DDR5 4800,延迟设定为40-40-40-76,因此在这个设置下它的内存性能并不突出,与普
    发表于 09-15 10:40 1175次阅读
    XMP <b class='flag-5'>DDR5</b> 8000<b class='flag-5'>内存</b>性能测试详解

    ddr5的主板可以用ddr4内存吗 几代CPU才能上DDR5

    DDR5的主板不支持使用DDR4内存DDR5(第五代双倍数据率)和DDR4(第四代双倍数据率)是两种不同规格的
    发表于 08-09 15:36 1.8w次阅读

    EUV光刻DDR5内存狂飙 单条1TB不是梦

    随着制程工艺的进步,DRAM内存芯片也面临着CPU/GPU一样的微缩难题,解决办法就是上EUV光刻机,但是设备实在太贵,现在还要榨干DUV工艺最后一滴,DDR5内存有望实现单条1TB。
    的头像 发表于 07-31 17:37 1019次阅读
    EUV光刻<b class='flag-5'>DDR5</b><b class='flag-5'>内存</b><b class='flag-5'>狂飙</b> 单条1TB不是梦