0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

网络开源技术的发展趋势和未来的挑战

驭数科技 来源:驭数科技 2023-06-13 14:35 次阅读

2023年6月,第三届网络开源技术生态峰会在北京成功召开。中科驭数高级副总裁、CTO卢文岩博士受邀出席本届峰会,并在活动主论坛分享题为《P4可编程的DPU 让算网生态更加开放融合》的主题演讲。

数据中心“税”与异网融合“税”是当前算网生态的两大痛


算力,毫无疑问是当前数字经济发展的核心增长力,已经成为像水、电、网一样的基础性生产要素,事关到整个核心要素的升级,是驱动经济社会数字化转型的新引擎。 演讲伊始,卢文岩博士简要介绍了针对当前业界普遍达成共识的分层算力网络结构,并表示统筹云、网、边、端于一体的新一代计算技术已成为算力网络的发展方向。 最上层的云层是各类云计算平台和云服务提供商,提供大规模的计算和存储资源;网层提供云之间的高速连接;边层位于离用户和数据源更近的位置,提供低延迟、高可用性的计算和存储服务;端层是接入侧的设备,是数据的产生和接入点。这一分层结构使得算力网络能够满足不同应用场景的需求,实现云、网、边、端的协同工作。 这一算力网络架构,在发展过程中面临着数据中心“税”与异网融合“税”两大痛点。前者是指在现在的基础设施架构中,虚拟化管理和网络需要占据很多CPU资源。以某公有云厂商网络增强型云主机为例,基于2x25G普通网卡,24核CPU中4核用于虚拟网络功能,1核用于虚拟化管理功能,可用CPU资源不足80%。 而后者的痛点则在于异网融合的过程中,往往需要解决沉重的历史包袱,不同网络协议之间的通信需要大量专用的网络设备完成相应的转换,随着算网规模的扩大,不仅增加了网络管理的复杂性,还限制了算力网络的灵活性和可扩展性。

1ec8d8ee-0917-11ee-962d-dac502259ad0.png

这些挑战和限制,在来自云厂商和芯片厂商的行业专家的演讲中也得到了回应,他们结合各家实践经验,给出了更为具体的阐述。 中国移动研究院副院长段晓东指出,智算中心的发展是整个算力网络体系架构发展的重中之重,如何构筑一个区别于传统运营中心的新型智算中心,在算、存、网、管、效五个方面都有很大的提升和不同。传统的数据中心以CPU为核心的单机双路到GPU为核心的八卡互联,总线结构发生了飞跃变化。存储也从结构化单一到混合协议存储大量非结构数据。网络技术更重要,从普通以太网以10G、20G为核心,现在跃迁到200-400G。异构算力、算力原生,已经成为非常重要的诉求。 腾讯云与边缘网络技术总监陈炜先生在谈到腾讯云在算力网络方面的实践时提及,进入大AI模型时代,整个机房对电和算力的基础设施包括网络带来了新的挑战。堆砌GPU集群,已不再意味着能充分释放算力。极端情况下,网络通信时延会占据整个一次模型训练50%的时间,是非常惊人的数字。同时丢包给整个的网络的吞吐,也会带来50%的下降。 英特尔资深云网络技术专家丁晓艳也表示当前最大的瓶颈在于,随着算网融合、算力运算等各种云网络、边缘网络新应用的发展,以Tofino为代表的P4交换机无法应对随之而来的带宽需求,对于延时和抖动也无法得到保证。


DPU是下一代“算力网络”的核心算力芯片

为了解决当前算网生态面临的问题,灵活可编程的网络接入设备是解决此类问题的一个最优解。因此,DPU(Data Processing Unit)作为下一代"算力网络"的核心算力芯片应运而生,能够从硬件层面直接解决底层基础设施层面临的关键问题。 卢文岩博士指出,DPU本质上是一个可编程的Switch,中科驭数在两年前就发现了P4的魅力所在,并在DPU芯片功能定义的研发阶段布局了P4技术。到现在为止,中科驭数DPU芯片已全面支持P4编程,能够在数据中心、网络边缘和终端设备上提供了更大的灵活性和可扩展性;围绕DPU构建的软件开发平台HADOS,也可以为P4提供完善的技术支撑,加速P4技术在SDN网络中的研发落地应用。

P4可编程的DPU优势,首先在于高性能,整个执行下沉到专用硬件逻辑之中,可以有效提升系统的执行效率和处理能力;其次是高度可编程,当前算网融合过程中需要解决各类网络协议的转化和融合问题,DPU具备可编程能力可支撑自定义的场景、支持自定义协议栈快速开发;第三是低数据中心“税”,网络数据面处理完全下沉后可以大幅度降低现有数据中心的数据“税”,P4 runtime管控面也可以下沉到DPU,进一步释放服务器算力。 针对传统P4技术在有状态卸载、多功能核融合两方面存在的缺陷,卢文岩博士着重介绍了中科驭数第三代DPU芯片K2 Pro,并对其中网络架构的处理核展开详细展开说明——K2 Pro在芯片内部专门集成了可编程网络处理引擎以及专用数据分析引擎,不仅可以高效地完成数据增删改查、甚至更复杂的操作,更主要的目的——支持有状态的信息存储和查询,有效提升DPU芯片的性能、灵活性和资源利用效率。

1f0b945e-0917-11ee-962d-dac502259ad0.png

DPU P4技术将为算力网络提供坚实的可编程底座 对于DPU P4技术在算网领域的落地场景,卢文岩博士也作了进一步阐述。DPU P4技术的可编程性和灵活性,使得其在网关、服务器端、防火墙和比较协议等场景的应用中具备更大的优势,网络设备能够根据实际需求动态调整和配置网络协议,实现更高效、智能的数据处理和网络管理。这一特点将为这些应用场景带来更好的性能、安全性和可靠性。 以分布式NAT网关为例,当前公有云/混合云/私有云在与边缘云对接的场景中,受限于各地不同接入条件,存在大量需要NAT转换场景。传统方案中往往使用专有网关设备实现,成本高、性能差。DPU P4解决方案能够灵活支持各种动态与静态地址转换需求。基于高性能硬件,性能提升4倍以上;支持分布式网关部署,可以根据业务情况动态调整;网关DPU与服务器DPU采用相同硬件,可以更好的保护硬件投资。

1f41d532-0917-11ee-962d-dac502259ad0.png

本届网络开源技术生态峰会由中国通信学会指导,中国通信学会开源技术委员会、江苏省未来网络创新研究院主办,SDNLAB社区、阿里云计算有限公司协办。主论坛深入探讨了网络开源技术的发展趋势和未来的挑战,激发了新的思考和创新。相信通过共同努力,DPU P4技术将为算网生态的开放融合带来新的可能性,推动算力网络的发展和创新,为未来的数字化社会提供更强大、更可靠的算力支持。
责任编辑:彭菁

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 存储
    +关注

    关注

    13

    文章

    3964

    浏览量

    84967
  • 数字化
    +关注

    关注

    8

    文章

    8019

    浏览量

    61119
  • 开源技术
    +关注

    关注

    0

    文章

    388

    浏览量

    7856

原文标题:P4可编程的DPU 让算网生态更加开放融合!|第三届网络开源技术生态峰会

文章出处:【微信号:yusurtech,微信公众号:驭数科技】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    深圳比创达电子EMC|EMC电磁兼容技术:原理、应用与未来展望.

    关乎设备的性能稳定,更涉及信息安全和人体健康等多个方面。本文深圳比创达电子EMC小编将探讨EMC电磁兼容技术的原理、应用以及未来发展趋势,大家一起来了解下吧!一、EMC电磁兼容技术的基
    发表于 04-01 12:23

    中国网络交换芯片市场发展趋势

    中国网络交换芯片市场的发展趋势受多种因素影响,包括技术进步、政策推动、市场需求以及全球产业链的变化等。以下是对该市场发展趋势的一些分析。
    的头像 发表于 03-18 14:02 406次阅读

    DC电源模块的未来发展趋势

    BOSHIDA  DC电源模块的未来发展趋势 未来DC电源模块的发展趋势可以预测如下:  DC电源模块的未来
    的头像 发表于 01-25 10:55 304次阅读
    DC电源模块的<b class='flag-5'>未来</b><b class='flag-5'>发展趋势</b>

    静压主轴的应用、优势及发展趋势?|深圳恒兴隆机电a

    静压轴承,无需能量转换,能够降低能源消耗。同时,无需润滑剂也减少了环境污染。三、静压主轴的发展趋势1、更高速度随着加工工艺的进一步提高,对静压主轴在高速度下的稳定性和精度要求也越来越高。因此,未来
    发表于 01-22 10:32

    配网故障定位装置:未来发展趋势挑战

    在电力系统中,恒峰智慧科技设计的配网故障定位装置是一个至关重要的设备,它可以帮助我们快速准确地找到故障发生的位置,从而进行有效的维修。随着科技的发展,这种设备也在不断地进步和改进。本文将探讨配网故障定位装置的未来发展趋势
    的头像 发表于 01-18 10:24 196次阅读
    配网故障定位装置:<b class='flag-5'>未来</b><b class='flag-5'>发展趋势</b>与<b class='flag-5'>挑战</b>

    DC电源模块技术未来发展趋势

    BOSHIDA DC电源模块技术未来发展趋势 随着科技的不断发展,DC电源模块技术也在不断演进。以下是DC电源模块
    的头像 发表于 01-11 15:57 283次阅读
    DC电源模块<b class='flag-5'>技术</b>的<b class='flag-5'>未来</b><b class='flag-5'>发展趋势</b>

    大模型数据集:构建、挑战未来趋势

    随着深度学习技术的快速发展,大型预训练模型如GPT-4、BERT等在各个领域取得了显著的成功。这些大模型背后的关键之一是庞大的数据集,为模型提供了丰富的知识和信息。本文将探讨大模型数据集的构建、面临的挑战以及
    的头像 发表于 12-06 15:28 890次阅读

    磁保持继电器的定义、应用及未来发展趋势

    磁保持继电器的定义、应用及未来发展趋势 磁保持继电器是一种电磁继电器,具有特殊的工作原理和功能。它可以通过电流斩波电路控制,实现在没有外部电源的情况下实现电气信号的保持。磁保持继电器被广泛应用于各个
    的头像 发表于 11-17 14:23 933次阅读

    UL9540A测试的未来发展趋势及影响

    UL9540A测试的未来发展趋势及影响将主要体现在全球标准化、技术创新推动、市场需求增加和产业链协同发展等方面。
    的头像 发表于 10-26 13:11 769次阅读
    UL9540A测试的<b class='flag-5'>未来</b><b class='flag-5'>发展趋势</b>及影响

    语音识别技术的现状及发展趋势

    一、引言 随着科技的快速发展,语音识别技术得到了广泛应用。语音识别技术是一种人机交互的关键技术,它使得计算机能理解和解析人类语言。本文将探讨语音识别
    的头像 发表于 09-28 16:55 2479次阅读

    面部表情识别的未来发展趋势和应用前景

    面部表情识别技术作为一项人工智能技术,具有广泛的应用前景和未来发展趋势。本文将探讨面部表情识别的未来发展
    的头像 发表于 08-29 18:22 920次阅读

    人工智能的未来发展趋势

    人工智能的未来发展趋势  人工智能(Artificial Intelligence,AI)是一种模拟人类智能的计算机科学技术,它的发展已经改变了我们的生活方式。随着AI
    的头像 发表于 08-15 16:07 8808次阅读

    面部表情识别的未来发展趋势

    面部表情识别作为一项复杂的技术未来将会面临更多的挑战和机遇。本文将探讨面部表情识别的未来发展趋势,包括
    的头像 发表于 08-09 16:16 443次阅读

    LED,OLED和量子点显示未来发展趋势

    LED、OLED和量子点显示是三种不同的显示技术,它们各有优缺点,未来发展趋势也各有不同。 LED显示 LED显示是一种基于发光二极管(LED)的显示技术。LED显示具有高亮度、长寿
    的头像 发表于 07-21 15:26 503次阅读

    XR虚拟制作:未来发展趋势

    XR虚拟制作:未来发展趋势 随着科技的不断发展,XR虚拟制作技术正在改变我们对电影制作和娱乐产业的理解。XR,或扩展现实,是一个涵盖了AR(增强现实)、VR(虚拟现实)和MR(混合现
    的头像 发表于 07-19 17:40 462次阅读