0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

使用 NVIDIA BlueField-3 DPU 驱动下一波应用程序

NVIDIA英伟达 来源:未知 2023-05-24 05:45 次阅读

ChatGPT、Stable Diffusion、DALL-E 以及类似的应用程序让生成式 AI 震惊了世界。ChatGPT 是有史以来发展最快的应用程序。其易用性和令人印象深刻的功能在短短几个月内吸引了超过一亿用户。

生成式 AI 为企业重塑其产品和商业模式带来了紧迫感。正如 NVIDIA 创始人兼首席执行官黄仁勋在 GTC 2023 主题演讲中所说:“AI 的 iPhone 时刻已经到来。” NVIDIA 加速计算正在助力全球企业通过解决超出普通计算机能力的问题来利用人工智能

NVIDIA BlueField DPU 助力加速计算

NVIDIA 加速计算技术堆栈使每个行业都能利用人工智能的强大功能,提供运行下一波应用程序所需的性能、规模和能效水平。

加速计算主要运行在三个基本元素之上:

  • CPU:用于串行处理和运行超线程应用程序。

  • GPU:擅长并行处理,并针对加速现代工作负载进行了优化。

  • DPU:非常适合基础设施计算任务;用于卸载、加速和隔离数据中心网络、存储、安全和管理工作负载。

在现代软件定义数据中心中,执行虚拟化、网络、存储和安全的操作系统可能会消耗近一半的数据中心 CPU 核心和相关电力。数据中心必须加速每个工作负载以节省电力,并释放 CPU 来处理创收工作负载。

NVIDIA BlueField DPU(数据处理器)卸载并加速数据中心操作系统和基础设施软件。

NVIDIA 正在其数据中心计算系统中集成 BlueField-3 DPU,包括第三代 NVIDIA OVX 系统,以便在数据中心规模创建和操作 NVIDIA Omniverse 应用程序。想了解更多信息,请参阅 NVIDIA 发布用于驱动工业元宇宙应用的第三代 OVX 计算系统,推动 Omniverse 实现大规模部署。

使用 DPU 的领先企业

Oracle 云基础设施(OCI)继在 GTC 2023 发布之后,最近公布了将 NVIDIA BlueField-3 DPU 集成到其网络堆栈中的计划。该计划旨在通过将网络和安全任务从 CPU 卸载到 DPU 来优化数据中心性能,从而实现更快、更高效的处理。

通过利用 BlueField-3 DPU 的强大功能,OCI 随时可以增强其基础设施,为客户提供无缝的云体验。想了解更多详细信息,请参阅 Oracle 云基础设施(OCI)选择 NVIDIA BlueField 数据中心加速平台。

此外,包括 Check Point、Cisco 、DDN、Dell EMC、Juniper、Palo Alto Networks、Red Hat 和 VMWare 在内的二十多个生态系统合作伙伴使用 BlueField 数据中心加速技术来更高效地运行其软件平台。

NVIDIA BlueField -3 平台概述

NVIDIA BlueField-3 具有 220 亿个晶体管,是第三代 NVIDIA DPU。它是一款片上系统(SoC)设备,可提供高达 400Gbps 以太网和 InfiniBand 连接。BlueField -3 DPU 最多支持四个不同的 MAC 地址,可以提供各种端口配置,从单个 400Gbps 端口(四通道 PAM4 112)到四个 25、50 或 100 Gbps端口。

与上一代相比,BlueField-3 DPU 具有 2 倍的网络带宽、4 倍的计算能力和几乎 5 倍的内存带宽,同时通过 NVIDIA DOCA 软件框架提供完全的向后兼容性。

这些关键进步使 BlueField-3 DPU 能够以高达 8 倍的速度运行工作负载,同时降低 TCO 并提高数据中心能效。例如,BlueField -3 DPU 可从 CPU 卸载 HPC / AI MPI 集合通信,将速度提高近 20%,这相当于为大型超级计算机节省 1800 万美元的成本。想了解更多信息,请参阅节能环保:NVIDIA BlueField DPU 提升数据中心效率。

ded187d6-f9b2-11ed-90ce-dac502259ad0.png

图 1:与 NVIDIA BlueField -2 DPU 相比,

NVIDIA BlueField -3 DPU 的内存带宽和计算能力提高了四倍

BlueField-3 DPU 由三个主要模块组成:

  • 网络:集成网络和安全硬件加速器的最新一代 NVIDIA ConnectX-7 智能网卡。

  • 编程计算:具有 16 个 ARM A78 v8.2 核心组成的强大集群,专为控制平面应用程序提供优化的、完全一致的低延迟网络互连技术。数据平面可编程性通过加速管道线(pipeline)和新的可编程数据路径加速器(DPA)实现。数据路径加速器是一颗由 16 个超线程核心组成的 I/O 和数据包处理器,专为设备仿真、拥塞控制、自定义协议等 IO 密集型、低计算任务而构建。

  • 内存:双 64 位 DDR5-5600 内存接口(80GB 带宽)和集成的 32 通道第五代 PCIe 交换机。PCIe 接口可以分叉并用作服务器托管(端点)或自托管(根复合体),以管理 GPU 或直连 SSD 设备。

作为 “服务器前面的服务器”,BlueField-3 DPU 是唯一配备集成式 ASPEED AST2600 基板管理控制器(BMC)的 DPU 平台。BlueField BMC 是一个专用处理器,用于监控 DPU 板的物理状态,并使系统管理员能够通过独立连接来管理平台。这增强了系统的安全性、可靠性、可用性和可维护性。

DPU BMC 是一个受信任的实体,具有自己的外部信任根,以确保其固件的安全。它支持通过独立的带外管理网络调配和管理 BlueField DPU,并使用标准接口和 Redfish 协议管理 DPU 的整个生命周期。

BMC 的一些功能包括:

  • 控制台接口访问 BlueField DPU

  • 设置 BlueField UEFI 配置

  • 监测 BlueField DPU 及其资源

  • 更新和恢复 BlueField DPU 固件

  • 重置控制(即使在 BlueField 操作系统停止时)

BlueField-3 DPU 全面产品线

NVIDIA 提供了各种 BlueField-3 DPU 平台,旨在满足各行各业和用例的独特计算、内存和性能需求。这使客户能够选择符合其特定要求的 BlueField-3 DPU 产品,同时享受先进的功能和尖端的性能。

def9890c-f9b2-11ed-90ce-dac502259ad0.jpg

图 2:面向不同目标市场的

NVIDIA BlueField-3 DPU 旗舰平台

目标市场和旗舰平台

BlueField-3 DPU 用于几个关键旗舰平台和目标市场,具体如下:

超大规模高性能计算(HPC)/

人工智能(AI)

高性能计算和人工智能工作负载是率先采用 400Gbps(NDR InfiniBand 和 400 GbE)网络速度的工作负载,因为高性能计算就是为了实现最高性能和巨大规模的。BlueField DPU 利用其 ARM 核心从系统主机 CPU 卸载消息传递接口(MPI)的元素,并实现了无阻塞集合通信,从而扩展了 NVIDIA 网络计算能力。这使得系统主机 CPU 能够在峰值重叠时执行计算。

B3240:拥有满足极具挑战性的超大规模高性能计算/人工智能需求的强大性能和网络能力。此 BlueField-3 DPU 平台为 NVIDIA DGX H100 等系统提供动力,使其能够承担科学研究或生成人工智能的工作负载。它使用双 400Gbps NDR 连接、32GB DDR5 内存子系统和 2.3GHz 的 ARM 核心速度。

B3140H:具有半高半长(HHHL)外形规格,使其与大多数企业服务器兼容。该设备提供单个 400Gbps 端口和 16GB DDR5 内存,同时在低功耗范围内运行。这使其成为高性能计算/人工智能环境的理想选择,在空间或电源可用性受限的环境下实现所需的可扩展性能。

云计算

云行业正在经历的快速增长要求云提供商不断创新和定制其服务产品,以满足客户需求。现代云平台使用基于虚拟机监控程序(Hypervisor)的虚拟化,以最大限度地增加在计算和数据中心层面可分配给租户的虚拟实例数量。BlueField-3 DPU 支持多达 4096 个虚拟功能(VF),使云提供商能够在云计算平台上托管比上一代多 4-8 倍的虚拟实例。

B3220:提供双 200Gbps 端口、32GB DDR5 内存子系统和 2.3GHz 的 ARM 核心速度,具有满足最具挑战性的云所需的性能和网络功能。因此,超大规模 Oracle 云基础设施(OCI)已在其网络堆栈中添加了 BlueField-3 DPU,旨在提供最先进、可持续的云基础设施,并提供卓越的性能。B3220 平台还为 NVIDIA OVX 3.0 系统助力,实现更高的性能、零信任安全,并在云中无限扩展工业元宇宙应用程序。

B3210:100Gbps 速率的 B3210 非常适合满足领先企业数据中心的需求。B3210 是运行企业工作负载平台 VMware vSphere 的目标 DPU,为成千上万的公司提高性能、效率和安全性。

储存

B3220SH:B3220SH 自托管平台对集成 NVMe-oF、NVMe/TCP 或静态数据加速器的 NVMe 存储系统进行了优化。B3220SH 可通过 32 通道的第五代 PCIe 接口托管多达 16 个 SSD。

业界领先的网络性能

与上一代产品相比,BlueField-3 DPU 具有显著的性能提升,使其成为需要高性能网络的数据密集型人工智能工作负载的理想解决方案。图 3 显示了基准测试结果,证明了BlueField-3 DPU 领先的网络性能。

df164628-f9b2-11ed-90ce-dac502259ad0.jpg

图 3 :NVIDIA BlueField-3 DPU

和 BlueField-2 DPU 的测试结果比较

使用 NVIDIA BlueField-3 DPU

为您的应用程序助力

在云主导企业 IT 的时代,生成式 AI、数据科学和元宇宙应用程序等现代工作负载正在蓬勃发展。为了满足对人工智能飞速发展的需求,云构建商开始采用 NVIDIA 加速计算(主要是 GPU 和 DPU)。

NVIDIA BlueField-3 DPU 由 NVIDIA DOCA 软件提供助力,将传统的计算环境转变为高效、高性能、安全且可持续的数据中心,从而实现下一波应用程序的交付。

观看下方视频

了解更多关于 NVIDIA BlueField DPU 的信息!

扫描下方二维码,或点击“阅读原文” 查看更多有关 NVIDIA BlueField DPU 的信息。

df385ed4-f9b2-11ed-90ce-dac502259ad0.png


扫描下方二维码,即可查看 BlueField-3 DPU 产品手册和网络产品资源。

df4bc7a8-f9b2-11ed-90ce-dac502259ad0.png

df6a23e2-f9b2-11ed-90ce-dac502259ad0.gif  

NVIDIA BlueField DPU 往期内容 使用 VMware vSphere 8 和 NVIDIA BlueField DPU 加速 Redis 性能
借助 NVIDIA DPU 和 NVIDIA DOCA 为人工智能时代的数据中心带来变革
GTC23 | Oracle 云基础设施 (OCI) 选择 NVIDIA BlueField 数据中心加速平台
NVIDIA 人工智能开讲 | BlueField DPU 如何帮助企业提升数据中心能效
白皮书发布 | 看 NVIDIA BlueField DPU 如何让数据中心变得更加环保


原文标题:使用 NVIDIA BlueField-3 DPU 驱动下一波应用程序

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英伟达
    +关注

    关注

    22

    文章

    3740

    浏览量

    90795

原文标题:使用 NVIDIA BlueField-3 DPU 驱动下一波应用程序

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    NVIDIA DOCA-OFED的主要特性

    NVIDIA DOCA 软件平台释放了 NVIDIA BlueField 网络平台的潜力,并为NVIDIA BlueField和Connec
    的头像 发表于 11-09 13:50 169次阅读

    简单认识NVIDIA网络平台

    BlueField-3 SuperNIC,为多租户生成式 AI 云和大型企业级用户提供了各种至关重要的先进功能。其核心结构是交换机 + SuperNIC(超级网卡)+ LinkX + DOCA 软件开发包 + NCCL 集合通信库。
    的头像 发表于 09-09 09:22 401次阅读

    IaaS+on+DPU(IoD)+下一代高性能算力底座技术白皮书

    大规模生产环境落地应用的条件。某种程度上,IoD 技术已成为下一代高性能算力底座的核心技术与最佳实践。 白皮书下载:*附件:IaaS+on+DPU(IoD)+下一代高性能算力底座+技术白皮书(1).pdf
    发表于 07-24 15:32

    NVIDIA BlueField-3 DPU助力思科提高工作负载安全性和运营效率

    、位置和外形尺寸的应用程序工作负载。 思科最近发布了Cisco Secure Workload 3.9 版,将企业的安全性和运营效率提升到了新的水平。它提供了新的功能来缓解威胁和漏洞,并为部署微分段(microsegmentation)提供了更大的灵活性。它现在还扩展到NVIDI
    的头像 发表于 06-27 17:31 724次阅读

    借助NVIDIA DOCA 2.7增强AI 云数据中心和NVIDIA Spectrum-X

    NVIDIA DOCA 加速框架为开发者提供了丰富的库、驱动和 API,以便为 NVIDIA BlueField DPU 和 SuperNI
    的头像 发表于 05-29 09:22 457次阅读

    NVIDIA DPU编程入门开课仪式在澳门科技大学成功举办

    5 月 24 日,NVIDIA DPU 编程入门开课仪式在澳门科技大学成功举办。作为首个在中国开设 NVIDIA DPU 编程相关课程的高校,来自澳门科技大学不同院系的师生共同见证了本
    的头像 发表于 05-28 09:40 354次阅读

    赛轮思与NVIDIA合作,利用生成式AI打造下一代车内体验

    AI 驱动的移动出行创新企业与 NVIDIA 合作,打造下一代车内体验。
    的头像 发表于 05-23 10:12 1205次阅读

    Nvidia的AI芯片路线图分析与解读

    SmartNIC智能网卡/DPU数据处理引擎的下一跳ConnectX-8/BlueField-4目标速率为 800G,与1.6T Quantum和Spectrum-X配套的SmartNIC和D
    发表于 04-29 09:59 905次阅读
    <b class='flag-5'>Nvidia</b>的AI芯片路线图分析与解读

    NVIDIA 发布全新交换机,全面优化万亿参数级 GPU 计算和 AI 基础设施

    NVIDIA 软件实现了跨  Blackwell GPU、新交换机和 BlueField-3 SuperNIC 的分布式计算,大幅提升了 AI、数据处理、高性能计算和云工作负载的性能     美国加利福尼亚州
    发表于 03-19 10:05 311次阅读
    <b class='flag-5'>NVIDIA</b> 发布全新交换机,全面优化万亿参数级 GPU 计算和 AI 基础设施

    NVIDIA显卡驱动下载哪个?NVIDIA显卡驱动下载方法

    关于下载哪个NVIDIA显卡驱动,建议您下载最新版本的官方驱动程序,以确保显卡性能的稳定性和最佳体验。同时,也可以根据您的电脑型号和配置,选择适合您的驱动程序版本。如果您不确定应该下载
    的头像 发表于 03-01 17:11 2528次阅读

    基于NVIDIA DOCA 2.6实现高性能和安全的AI云设计

    网络平台上快速创建应用程序和服务,并启用 NVIDIA BlueField DPUNVIDIA
    的头像 发表于 02-23 10:02 427次阅读

    NVIDIA DOCA 2.5 长期支持版本发布

    正值 NVIDIA DOCA 面世三周年之际,NVIDIA 于近日发布了适用于 NVIDIA BlueField-3 网络平台的 NVIDIA
    的头像 发表于 12-26 18:25 384次阅读
    <b class='flag-5'>NVIDIA</b> DOCA 2.5 长期支持版本发布

    《数据处理器:DPU编程入门》DPU计算入门书籍测评

    同时介绍了DPU开发: 命令行DPU板卡设置 基于qemu的DPU应用模拟开发(基于DPU的arm64处理器平台) DPU各个模块检查及加
    发表于 12-24 10:54

    《数据处理器:DPU编程入门》读书笔记

    AI、机器学习、安全、电信和存储等应用,并提升性能,减轻虚拟化Hypervisor的工作负载。同时,它还具备开放性集成功能,未来支持更多功能集成。NVIDIADPU还提供统的面向各种应用的编程接口
    发表于 12-21 10:47

    《数据处理器:DPU编程入门》+初步熟悉这本书的结构和主要内容

    BlueField-3 DPU 的关键软件定义、硬件加速应用包括: 1.云网络:云覆盖、SDN 加速、NAT、负载均衡等。 NVIDIA BlueField-3
    发表于 12-08 18:03