0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

DPU技术赋能下一代AI算力基础设施

驭数科技 来源:驭数科技 2024-04-20 11:31 次阅读

4月19日,在以“重构世界 奔赴未来”为主题的2024中国生成式AI大会上,中科驭数作为DPU新型算力基础设施代表,受邀出席了中国智算中心创新论坛,发表了题为《以网络为中心的AI算力底座构建之路》主题演讲,勾勒出在通往AGI之路上,DPU技术赋能下一代AI算力基础设施中的关键作用。

算力是当前人工智能领域发展的关键,是AI时代的“面包”。要训练百万亿参数超大预训练模型,算力基础设施架构优化是提升算力的首要步骤。当前,DPU算力基础已经发展迭代了4到5年,算力领域对DPU的期望和需求已经涵盖计算、网络、存储、安全等多个领域。

中科驭数旨在通过DPU将计算加速、存储加速、网络加速、安全加速及云原生加速等基础设施层深度整合,构建高性能、高集成的AI服务基础架构。公司已基于此打造出涵盖云原生DPU软硬一体加速、RDMA/RoCE AI计算网络、NVMe-oF高性能存储、灵活存算分离架构、DPU硬件级安全隔离以及数据中心资源池化与统一调度的丰富产品矩阵与解决方案,不仅仅能够助力AI算力底座的整体性能提升,也为用户提供了更高效更完整的基础设施解决方案,有力支撑各类AI应用的快速发展。

以中科驭数自研FLEXFLOW-2100R RDMA加速DPU卡为例,该加速卡产品能够将高性能、稳定性、便捷性和通用性融为一体,提供2x100GbE网口的连接能力,支持RoCEv2的硬件卸载能力以及无损网络能力,为国产化业务场景提供微秒级时延和百G带宽的RDMA网络环境,为用户提供灵活和高性能的网络解决方案。同时,适配市面上所有主流支持无损网络的交换机,以及国内外主流服务器和操作系统,可以快速接入现有RDMA网络环境。经实测,KPU FLEXFLOW-2100R在4K以下小文件send、read、write测试场景中,时延数据均在5us以下,最低可达3us,优于国内外主流RDMA智能网卡性能水准。

需要看到的是,随着AI向更多领域渗透,对基础设施的需求将更加多元化、智能化。同样,DPU的成功落地和使用需要经过精心设计和打磨,以满足整个基础设施领域的多样需求。中科驭数将继续秉持着技术创新和开放合作的理念,欢迎服务器厂商CPU/GPU厂商、操作系统厂商等上下游合作伙伴加入驭数DPU生态,共同推动AI算力底座的发展。



审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 交换机
    +关注

    关注

    21

    文章

    2641

    浏览量

    99662
  • DPU
    DPU
    +关注

    关注

    0

    文章

    358

    浏览量

    24189
  • 人工智能
    +关注

    关注

    1791

    文章

    47294

    浏览量

    238576
  • RDMA
    +关注

    关注

    0

    文章

    77

    浏览量

    8949
  • 生成式AI
    +关注

    关注

    0

    文章

    504

    浏览量

    478

原文标题:通往AGI路上,DPU将如何构建生成式AI时代的坚实算力基石?

文章出处:【微信号:yusurtech,微信公众号:驭数科技】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    企业AI租赁模式的好处

    构建和维护个高效、可扩展的AI基础设施,不仅需要巨额的初期投资,还涉及复杂的运维管理和持续的技术
    的头像 发表于 12-24 10:49 90次阅读

    再跃升!亿万克发布新一代AI服务器——G882N7+!

    的特质,但告急。想要打破数智时代的瓶颈,异构智成为有效方案。 近期,亿万克面向激增的AI
    的头像 发表于 10-25 17:02 217次阅读

    稳定、高效、低成本,储能与正在相互

    中心等基础设施的迅猛发展正推动着储技术的应用进入个新的阶段。   储能为数据中心
    的头像 发表于 10-09 00:08 4426次阅读

    AI驱动下的数字经济:智能社会基础设施革新

    AI驱动下的数字经济:智能社会基础设施革新 随着数字经济的迅猛发展,人工智能(AI技术
    的头像 发表于 08-21 16:01 380次阅读
    <b class='flag-5'>AI</b>驱动下的数字经济:智能社会<b class='flag-5'>基础设施</b>与<b class='flag-5'>算</b><b class='flag-5'>力</b>革新

    IaaS+on+DPU(IoD)+下一代高性能底座技术白皮书

    大规模生产环境落地应用的条件。某种程度上,IoD 技术已成为下一代高性能底座的核心技术与最佳实践。 白皮书下载:*附件:IaaS+on
    发表于 07-24 15:32

    国科微AI首席科学家邢国良:打造全系边端AI芯片,下一代自动驾驶

    发展机遇,特别是车载平台与基础设施的互联和协同将会大大提升自动驾驶的性能和安全性。当前,国科微全系边端AI芯片正在持续车路协同,助力下一代
    的头像 发表于 07-09 11:35 546次阅读
    国科微<b class='flag-5'>AI</b>首席科学家邢国良:打造全系边端<b class='flag-5'>AI</b>芯片,<b class='flag-5'>赋</b><b class='flag-5'>能</b><b class='flag-5'>下一代</b>自动驾驶

    中科驭数:DPU是构建高效智中心基础设施的必选项

    日前,在江苏省未来网络创新研究院、网络通信与安全紫金山实验室举办的“2024智网络技术与应用创新峰会”上,中科驭数作为DPU
    的头像 发表于 07-08 10:51 712次阅读

    联想全栈基础设施发布 跻身中国第阵营再启新程

    6月14日,以“异构智 稳定高效”为主题的联想基础设施新品发布会在北京成功举办。在与会嘉宾和合作伙伴的见证下,联想正式发布率先搭载英特尔至强 6
    的头像 发表于 06-17 10:15 674次阅读
    联想全栈<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>基础设施</b>发布  跻身中国第<b class='flag-5'>一</b>阵营再启新程

    联想发布全栈基础设施新品

    近日,联想在北京隆重举办了以“异构智 稳定高效”为主题的基础设施新品发布会。此次盛会不仅吸引了众多业界精英的瞩目,更在合作伙伴和与会嘉宾的见证下,发布了
    的头像 发表于 06-15 16:38 808次阅读

    基础设施的风险与挑战

    编者按网络有个美好的愿景,就是希望网,
    的头像 发表于 06-13 08:27 556次阅读
    <b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>基础设施</b>的风险与挑战

    云耀 X 实例:下一代柔性新物种,双倍性能加速跃级体验

    在云计算日益普及的今天,如何实现资源的灵活调配,让每都能按需取用,成为业界关注的焦点。华为云凭借深厚的
    的头像 发表于 05-22 19:36 417次阅读
    云耀 X 实例:<b class='flag-5'>下一代</b>柔性<b class='flag-5'>算</b><b class='flag-5'>力</b>新物种,双倍性能加速跃级体验

    《北京市基础设施建设实施方案(2024—2027年)》正式印发

    《北京市基础设施建设实施方案(2024—2027年)》正式印发
    的头像 发表于 05-17 08:36 527次阅读
    《北京市<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>基础设施</b>建设实施方案(2024—2027年)》正式印发

    解锁应用密码,网络基础设施AI大模型

    的“”。 相较于ChatGTP来说,Sora对视频生成和处理能力需要更大量的计算资源来支持,这也进步引发了行业对的不断投入:GPU
    的头像 发表于 04-18 10:09 311次阅读

    明天线上见!DPU构建高性能云底座——DPU技术开放日最新议程公布!

    技术在不同行业中的应用解决方案有哪些?能带来怎样的业务效果? 3月29日本周五,中科驭数集结产品大咖及解决方案专家团,诚邀您参加以“DPU构建高性能云底座”为主题的线上
    的头像 发表于 04-03 18:12 1006次阅读

    卫星通信序幕拉开,AI浪潮澎湃

    AI浪潮催生要求,基础设施需求持续提升。AIGC带来的超大需求拉动通信
    发表于 01-03 10:22 393次阅读
    卫星通信序幕拉开,<b class='flag-5'>AI</b><b class='flag-5'>算</b><b class='flag-5'>力</b>浪潮澎湃