0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Google 向生态系统开放可靠的低延迟硬件传输系统 Falcon

谷歌开发者 来源:未知 2023-11-10 17:45 次阅读

以下文章来源于谷歌云服务,作者 Google Cloud

作者:Dan Lenoski
职位: Google Cloud 工程副总裁
作者:Nandita Dukkipati
职位:Google Cloud 首席软件工程师

在 Google,我们长期使用以太网解决规模化问题,重构传输层,从而满足突发高带宽、高速率和低延迟的工作负载需求。例如对象存储这一工作负载长期以来需要这些网络属性,但随着大规模 AI/ML 训练和高性能计算 (HPC) 等新用例的涌现,此类需求再次大幅增长。过去,我们通过向计算机协会互联网工程任务组提供我们的构想,与业界公开分享我们在流量整形、拥塞控制、负载平衡等方面的经验。数年来,这些构想已在软件和少数硬件中得以实现。但展望未来,我们相信,借助专用且灵活的硬件辅助来实施这套方案,对整个行业更加有益。

为此,我们开发了 Falcon,其性能比纯软件传输更上一层楼。在 OCP 全球峰会上,我们通过开放计算项目(Open Compute Project) 向生态系统开放 Falcon,该项目是利用 Google 的生产经验帮助业界实现以太网现代化的不二之选。

Falcon 作为硬件辅助传输层而设计,具有可靠性、高性能和低延迟的特点,而且充分利用了经过生产验证的技术,包括 Carousel、Snap、Swift、PLB 以及 CSIG。

wKgZomVN_M-ASOa4AAEUXaoZ39s142.jpg

Falcon 的分层参见下图,其中包括其相关功能。我们展示了 RDMA 和 NVM Express 上层协议 (ULP),不过 Falcon 可根据生态系统的需要扩展到其他 ULP。

wKgZomVN_M-AAZwTAADTQnT8Y9Q351.jpg

Falcon 的底层使用三大关键技术,在有损的高带宽数据中心以太网络实现低延迟。细粒度硬件辅助往返时间 (RTT) 测量、基于硬件的流量整形、快速准确的数据包重传,并与支持多路径和 PSP 加密的 Falcon 连接相结合。在此基础上,Falcon 从一开始就被设计为一种多协议传输,能够支持性能要求和应用语义千差万别的上层协议。上层协议映射层不仅提供与 Infiniband Verbs RDMA 和 NVMe ULP 的开箱即用兼容性,而且包含了对超大规模应用至关重要的其他创新,例如灵活的排序语义和妥善的错误处理。最后一点是,硬件和软件协同设计,配合运行,帮助实现高信息传输速率、低延迟和高带宽等属性,同时保持灵活性,赋能可编程性和持续创新。

Falcon 反映出以太网继续在我们的行业中扮演中坚角色。Falcon 旨在实现超大规模的可预测高性能以及灵活性和可扩展性。我们期待与社区和行业合作伙伴合作,对以太网进行现代化改造,在 AI 驱动的未来里满足联网需求。我们相信,Falcon 将成为这一领域里正在推进的其他任务的重要补充。

行业视角

我们的行业合作伙伴对 Falcon 开发下一代以太网的前景充满期待。

"我们非常认可 Google 对 Falcon 做出的贡献,它与超以太网联盟的愿景一致,即推动以太网成为 AI 和高性能计算的最佳数据中心结构,我们也期待在这一重要领域继续推进行业创新。"

—— 超以太网联盟 (主要成员包括 AMD、Arista、Broadcom、Cisco、Eviden、Hewlett Packard Enterprise、Intel、Meta、Microsoft 和 Oracle)主席

Jetz 博士

"Falcon 率先应用在英特尔 IPU E2000 系列产品中。作为以太网传输的第一个应用实例,这些 IPU 的价值得到了进一步提升,可大规模增加长尾端延迟和拥塞处理功能。英特尔是超以太网联盟的指导成员,该联盟致力于为高性能 AI 和高性能计算工作负载发展以太网。我们计划在未来的 IPU 和以太网产品中部署基于此类标准的增强功能。"

——英特尔高级副总裁兼网络与边缘事业部

总经理Sachin Katti

"我们很高兴看到针对 AI 和高性能计算等关键工作负载的高性能传输协议能够在标准以太网/IP 网络上运行,并且大规模实现高应用带宽。"

——Arista Networks 软件工程副总裁

Hugh Holbrook

"思科很高兴看到 Falcon 对开放计算项目的贡献。长期以来思科始终支持开放标准,坚信广泛的生态系统。现代数据中心网络特别是 Al/ML 的发展速度和规模前所未有,对行业发展而言既是挑战也是机遇。Falcon 解决了这些网络面临的诸多挑战,实现了网络的高效利用。"

——思科研究员 Ofer Iny

"瞻博网络是开放生态系统的坚定支持者,因此我们很高兴看到 Falcon 向开放计算项目社区开放。Falcon 允许以太网作为数据中心网络的首选,为要求苛刻的工作负载带来高带宽、低尾延迟和拥塞缓解。如今,Falcon 为业界提供了一个成熟的解决方案,处理复杂的 AI/ML 工作负载。"


——瞻博网络首席技术官 Raj Yavatkar

"Marvell 大力支持并致力于开放式以太网生态系统的发展,为 AI 等要求苛刻的新兴工作负载提供支持。我们赞赏 Falcon 对开放计算项目的贡献,欢迎 Google 与业界分享实践经验。"

——Marvel 高级副总裁兼网络交换事业部总经理 Nick Kucharewski


wKgZomVN_M-AKqgIAAAafJIrrMk991.gif 点击屏末||即刻查看详细内容

wKgZomVN_M-Ae7IaAAATN9B0Fw0148.png

wKgZomVN_M-AQVaiAAMyGF3oQT4383.png

wKgZomVN_M-ABRXXAAAptPJQ2wE190.png


原文标题:Google 向生态系统开放可靠的低延迟硬件传输系统 Falcon

文章出处:【微信公众号:谷歌开发者】欢迎添加关注!文章转载请注明出处。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 谷歌
    +关注

    关注

    27

    文章

    6141

    浏览量

    105073

原文标题:Google 向生态系统开放可靠的低延迟硬件传输系统 Falcon

文章出处:【微信号:Google_Developers,微信公众号:谷歌开发者】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    对三星而言开放生态系统是什么

    在过去的五年里,三星投入了大量精力来建立团队、文化和流程,成为开放生态系统的积极贡献者。那么,为什么一家硬件公司会进行这样的投资?其价值何在?我们如何将硬件差异化与开源和标准结合起来?
    的头像 发表于 11-13 15:58 181次阅读

    英特尔和AMD组建x86生态系统咨询小组

    在联想2024 Tech World大会上,英特尔CEO帕特·基辛格宣布了一项重大合作:英特尔与AMD将共同组建X86生态系统咨询小组。
    的头像 发表于 10-16 16:34 316次阅读

    欧盟苹果施压:开放iOS与iPadOS操作系统,否则面临巨额罚款

    根据DMA的要求,苹果公司被赋予六个月的期限,以全面响应欧盟的指令,包括第三方开放iOS与iPadOS系统,接纳竞争对手的应用商店及支付系统。具体而言,欧盟期望苹果能够允许用户从非官
    的头像 发表于 09-23 14:27 360次阅读

    意法半导体推出图像传感器应用开发生态系统

    2024年7月11日,中国——全球领先的半导体制造商意法半导体(ST)正式推出了一套革命性的图像传感器应用开发生态系统,该系统集成了即插即用的硬件、评估用摄像头模块及专用软件,旨在加速基于其创新ST
    的头像 发表于 07-12 14:28 482次阅读

    商汤科技发布粤语大模型,推动香港人工智能生态系统发展

    商汤科技董事长兼 CEO 徐立表示,此次推出商量粤语版具有重要意义,希望借助日日新大模型 5.0 系列的创新产品和巨大潜力,助力香港人工智能生态系统的发展。
    的头像 发表于 05-31 11:11 547次阅读

    苹果硬件生态系统丰富,用户黏性大

     苹果以其丰富多元的硬件生态系统,涵盖了从 iPhone 至 Mac 电脑等多种设备,每个设备都有其独特的用户群体。
    的头像 发表于 04-18 11:03 419次阅读

    浅谈AMD Ryzen AI PC生态系统

    AMD与OEM合作伙伴联想和华硕,以及生态系统合作伙伴百川智能、有道、游戏加加、生数、始智AI等共同努力,共庆龙年,并在大中华区扩展了Ryzen AI生态系统
    的头像 发表于 04-11 11:05 716次阅读

    莱迪思举办2024莱迪思技术峰会展示其强大的FPGA合作生态系统

    莱迪思半导体近日在上海举办的2024年莱迪思技术峰会上展示了其强大且不断增长的全球生态系统,该生态系统由客户、IP和参考平台合作伙伴以及致力于推动FPGA创新的开发人员组成。
    的头像 发表于 03-14 15:10 529次阅读

    Meta欲打造巨型AI覆盖视频推荐生态系统

    Meta正计划打造一款巨型AI系统,以全面覆盖其视频推荐生态系统,为旗下产品提供统一的视频推荐引擎。
    的头像 发表于 03-11 11:14 635次阅读

    Renesas Ready生态系统合作伙伴解决方案介绍

    电子发烧友网站提供《Renesas Ready生态系统合作伙伴解决方案介绍.pdf》资料免费下载
    发表于 02-21 09:38 0次下载
    Renesas Ready<b class='flag-5'>生态系统</b>合作伙伴解决方案介绍

    RA生态系统合作伙伴解决方案提供卓越的平面航向和6轴IMU性能

    电子发烧友网站提供《RA生态系统合作伙伴解决方案提供卓越的平面航向和6轴IMU性能.pdf》资料免费下载
    发表于 02-19 09:46 0次下载
    RA<b class='flag-5'>生态系统</b>合作伙伴解决方案提供卓越的平面航向和6轴IMU性能

    Renesas Ready生态系统合作伙伴解决方案

    电子发烧友网站提供《Renesas Ready生态系统合作伙伴解决方案.pdf》资料免费下载
    发表于 01-14 11:04 0次下载
    Renesas Ready<b class='flag-5'>生态系统</b>合作伙伴解决方案

    芯原携手趣戴科技扩展手表GUI生态系统

    2024年1月9日,美国拉斯维加斯——芯原股份 (芯原,股票代码:688521.SH) 今日宣布专注于提供图形用户界面 (GUI) 软件服务的趣戴科技 (QDay Technology) 已加入其手表GUI生态系统,共同开发适用于各种应用的智能手表GUI解决方案。
    的头像 发表于 01-10 09:06 680次阅读

    RA生态系统合作伙伴解决方案-Aizip缺陷检测

    电子发烧友网站提供《RA生态系统合作伙伴解决方案-Aizip缺陷检测.pdf》资料免费下载
    发表于 12-21 09:55 0次下载
    RA<b class='flag-5'>生态系统</b>合作伙伴解决方案-Aizip缺陷检测

    RadioVerse:技术和无线电设计生态系统

    电子发烧友网站提供《RadioVerse:技术和无线电设计生态系统.pdf》资料免费下载
    发表于 11-24 11:43 0次下载
    RadioVerse:技术和无线电设计<b class='flag-5'>生态系统</b>