0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

浅析AmpereOne的效率优势

安晟培半导体 来源:安晟培半导体 2024-11-21 09:21 次阅读

无论是移动应用程序或数字商务等可见应用程序,还是航空公司定价算法或每次刷卡时激活的欺诈检测系统等幕后流程,AI 都已成为我们日常生活中不可或缺的一部分。尤其是生成式 AI,预计未来十年将以两位数的速度持续增长,到 2032 年市场规模可能达到1 万亿美元以上。

AI 技术的发展推动了对更强大的处理器的需求,尤其是 GPU,是构建 AI 基础设施的重要组成部分。NVIDIA 在行业和市场占据着主导地位,AMD 也越来越受欢迎,但企业必须面对GPU 持续增加的功耗,部分型号甚至已经超过1kW,这一趋势也导致全球数据中心功耗大幅增加。预计在 2022 年至 2026 年间还将翻一番,容量已然成为公共事业提供商和企业面临的主要挑战。

目前,大约80% 的数据中心运营商面临功率限制,许多运营商对每机架功率限制在 10-20 kW的范围内。虽然传统方法证明,提高处理器性能和效率可以提高总功耗,但很多数据中心运营商已经达到功率上限,这也对企业的持续创新和增长造成了阻碍。此外,扩展机架空间或适应特殊的冷却方法通常成本高昂或受到空间和法规的限制;老化的服务器基础设施(许多服务器使用时间超过 5 年)也不断增加维护成本和安全风险。

对此,最实用的解决方案是升级现有的基础设施。及时的服务器更新能够大幅整合机架空间,从而降低运营成本,回收电力预算,并支持部署能够处理 AI 工作负载的现代服务器。在评估服务器更新时,运营商需要用新的方式来思考,只要新一代处理器的每瓦性能(即效率)提高,处理器功耗的增加就可以被接受,这意味着新服务器比旧服务器 “里程更长”。尽管最大机架功率预算有限并开始接近极限,通过专注于每机架的性能,企业可以优化现有的电力和空间,使他们能够从数据中心的局限性转为更加专注于业务的增长和创新。

Ampere 的云原生处理器旨在提供横向扩展性能和领先的效率。AmpereOne 自研核是替代老旧服务器的最佳 CPU 选择。在AmpereOne 效率白皮书中,详细阐述了 AmpereOne 的效率优势,相较 AMD EPYC 9004 系列处理器,如何使云原生和 AI 工作负载的每机架性能提高 67%。

以下是 7 个开源工作负载,从 Web 服务器和负载均衡器到数据库,再到缓存和内存中数据存储。它们在许多现代 Web 服务中颇受欢迎,因为它们通过缓存处理 web 流量管理、数据存储和性能优化。

91c9f60c-a7a4-11ef-93f3-92fbcf53809c.png

在AI 计算时代,通过将 AI 推理工作负载添加到上述通用工作负载中,可以增强各个行业的产品和服务。下表展示了 AmpereOne 在机架级别的性能和效率,适用于推理工作负载,如推荐引擎(DLRM)、图像处理(ResNet-50)以及以语言为中心的工作负载(Whisper和Llama3)。这些工作负载支持现代设施,例如聊天机器人、在电子商务网站上查看推荐的产品、在流媒体平台上呈现“您可能喜欢的节目”,或者为直播电视流提供实时隐藏字幕。

91d59e44-a7a4-11ef-93f3-92fbcf53809c.png

对于前面提到的每机架可用功率有限的企业和服务提供商来说,实现每机架的最大性能尤为重要。即使是中等规模的企业,由 AI 驱动的 web 服务也可以从 AmpereOne 中受益。与 AMD EPYC Genoa 8 个机架的输出相比,AmpereOne 可以在不牺牲性能水平的情况下,将机架空间减少 38%,将功率预算降低 37%,并将购置成本降低 49%。以下代理 web 服务包括作为前端 Web 服务器的 NGINX、作为键值存储的 Redis、作为内存数据库的 Memcached、作为关系数据库的 MySQL,以及分别作为推荐引擎和聊天机器人的 AI 组件 DLRM 和 Llama3。

91e45d12-a7a4-11ef-93f3-92fbcf53809c.png

AmpereOne 可以通过更新老化的服务器来重新利用预算、空间和功率。我们展示了如何节约资本支出,如何通过降低功耗和管理开销而实现运营支出的节省,在三年内为企业节省大量 TCO。相较 AMD EPYC Bergamo,运营商可以节省 33% 的成本;与 AMD EPYC Genoa 相比,可节省高达 41% 的成本,这都归功于AmpereOne。

91f8aeca-a7a4-11ef-93f3-92fbcf53809c.png

无论公司规模大小,“AI 海啸” 将继续降低企业大规模实施 AI 的准入门槛。即使没有资源去雇佣专门的 AI 团队,企业也可以通过服务提供商来开启 AI 之旅,并迅速投入生产。因此,整合传统基础设施为 AI 扩展释放空间尤其重要。

关于 Ampere Computing

Ampere Computing 是一家现代化半导体企业,致力于塑造云计算的未来,并推出了世界上首款云原生处理器。为可持续云而生,Ampere 云原生处理器兼具最高性能和最佳每瓦性能,助力加速多种云计算应用的交付,为云提供行业领先的性能、能效和可扩展性。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 处理器
    +关注

    关注

    68

    文章

    19404

    浏览量

    230923
  • 服务器
    +关注

    关注

    12

    文章

    9295

    浏览量

    85926
  • Ampere
    +关注

    关注

    1

    文章

    69

    浏览量

    4556
  • 生成式AI
    +关注

    关注

    0

    文章

    514

    浏览量

    529

原文标题:技术文章 | 为AI计算释放空间

文章出处:【微信号:AmpereComputing,微信公众号:安晟培半导体】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    移动WiMax参数指标及射频测试浅析

    移动WiMax参数指标及射频测试浅析 WiMax技术要在具体的应用场景中体现出自身的优势,才能得到市
    发表于 10-20 21:37 848次阅读

    LXI设备浅析

    LXI设备浅析LXI通讯技术,目前要替代的是GPIB通讯技术,它们的用途和目的是共同的。GPIB只是一个设备的通讯接口,就像计算机的串口一样。LXI(LAN)也应是这样,是一个设备的通讯接口,只是
    发表于 06-08 10:22

    浅析uCosII

    浅析uCosII
    发表于 08-20 13:26

    电源滤波电路浅析

    电源滤波电路浅析
    发表于 02-06 23:48

    浅析高速公路采用工业以太网技术的优势

    浅析高速公路采用工业以太网技术的优势 随着工业设备智能程度越来越高,工业以太网已经凭借着网络化的功能和开放式的特性从工业通讯领域中脱颖而出成为业界的
    发表于 11-25 10:04 761次阅读

    大屏幕彩电开关稳压电源效率浅析

    对于大屏幕彩电开关稳压电源效率的详细浅析
    发表于 10-11 19:04 46次下载
    大屏幕彩电开关稳压电源<b class='flag-5'>效率</b><b class='flag-5'>浅析</b>

    STM32L476 FPU 执行效率之比较浅析资料下载

    电子发烧友网为你提供STM32L476 FPU 执行效率之比较浅析资料下载的电子资料下载,更有其他相关的电路图、源代码、课件教程、中文资料、英文资料、参考设计、用户指南、解决方案等资料,希望可以帮助到广大的电子工程师们。
    发表于 04-21 08:45 13次下载
    STM32L476 FPU 执行<b class='flag-5'>效率</b>之比较<b class='flag-5'>浅析</b>资料下载

    Ampere发布AmpereOne系列处理器,单颗处理器支持最高192个物理核心

    AmpereOne出现以前,Ampere Altra系列最多128核心,新的AmpereOne则是从136核起步,最多192核心。所以,AmpereOne可以看做是Ampere Altra的补充,两者将长期共存。
    发表于 06-02 10:43 689次阅读
    Ampere发布<b class='flag-5'>AmpereOne</b>系列处理器,单颗处理器支持最高192个物理核心

    全新AmpereOne系列处理器,一款192核的云原生CPU

    这个基于自研内核打造的产品与之前的产品不会存在任何的兼容问题,因为AmpereOne系列处理器和Ampere Altra系列的处理器都是基于ARM ISA的。
    发表于 06-08 11:50 985次阅读
    全新<b class='flag-5'>AmpereOne</b>系列处理器,一款192核的云原生CPU

    192个自研核心,AmpereOne的绝对性能压制

    AI推理性能对比 / Ampere 从性能对比上,我们可以看出AmpereOne在AI推理负载上的领先,比如在生成式AI和推荐算法上,AmpereOne的单机架性能是AMD EYPC 9654 Genoa的两倍或以上,但两者却有着近乎相同的系统功耗,
    的头像 发表于 06-13 15:03 1417次阅读
    192个自研核心,<b class='flag-5'>AmpereOne</b>的绝对性能压制

    基于5nm工艺的全新AmpereOne系列处理器解析

    AmpereOne系列处理器意味着“更多”——更多内核、更多 IO、更多内存、更高性能和更多云功能。” Jeff Wittich表示,凭借8通道DDR5内存和一个12通道的平台,加上128通道的PCIe Gen5 IO,AmpereOne正在扩展整个平台,“是一款真正意
    发表于 06-15 14:35 732次阅读
    基于5nm工艺的全新<b class='flag-5'>AmpereOne</b>系列处理器解析

    Google推出基于AmpereOne处理器的C3A实例

    2023 年 8 月 29 日,在 Google Cloud NEXT’23 大会上,Google 正式宣布推出新款计算优化型实例——搭载 AmpereOne 系列处理器的 C3A 私有预览版
    的头像 发表于 08-31 15:37 802次阅读

    使用AmpereOne遏制快速增长的能源需求

    在 Ampere 2024 年度战略和路线图更新视频中,CEO Renée James 和 CPO Jeff Wittich 强调 Ampere 如何通过 AmpereOne 的设计来遏制快速增长的能源需求。
    的头像 发表于 07-15 09:50 362次阅读
    使用<b class='flag-5'>AmpereOne</b>遏制快速增长的能源需求

    Ampere发布最新192核12内存通道AmpereOne M处理器

    Ampere 发布了旗舰产品 AmpereOne 处理器的新版本,拥有 12 个内存通道的最新处理器。正如 Ampere 在去年5月份的年度战略和产品路线图更新中提到的,公司正在构建
    的头像 发表于 01-09 13:44 159次阅读

    Ampere®发布新版AmpereOne®处理器,强化AI与云计算性能

    Ampere®公司近期推出了其旗舰产品AmpereOne®处理器的新版本,这一新版本处理器配备了12个内存通道,进一步提升了性能。这一举动与Ampere在去年5月份公布的年度战略和产品路线图更新中
    的头像 发表于 01-09 18:09 430次阅读