0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

联想用万全智算,画出中国AI的山脊

脑极体 来源:脑极体 作者:脑极体 2024-04-25 10:00 次阅读

如果我们把欧亚大陆看作一个整体,会发现中国是一个有几座山脉的超大半岛,横断山脉与天山、阴山、昆仑山、南岭、大兴安岭,一横五纵的山脊,描绘出了中华大地的轮廓。

一方水土的休养生息,需要山脉作为屏障;一项科技的崛起与发展,需要基础设施作为支撑。

伴随着“人工智能+”行动的开展,AI技术在中国迎来了新的发展高峰。但如果没有基础设施层面AI算力的有效供给,AI算法的发展,企业对AI应用都将变成无本之木,无源之水。

发展AI技术,首先需要构筑算力山脉。通过智能算力,把AI产业切实保护起来,支撑起来。尤其需要注意的是,这种构筑并不是简单的算力供给,而是需要切实应对企业在智算运用过程中的挑战,提升算力效率,降低算力门槛。

中国AI的算力山脉,究竟如何勾勒?

联想认为,异构智算就是答案。

4月18日,第十届联想创新科技大会Tech World在上海举行。期间,联想提出融合了公共大模型、个人级大模型和企业大模型的混合式人工智能是未来大势所趋。这个过程中,AI大模型将在各个行业深入落地,由此带来了智能算力的指数级增长,对中国AI基础设施提出了全新要求。

为了帮助千行百业应对混合式人工智能带来的基础设施之变,联想ISG提出了一横五纵的发展战略。

一横五纵背后,是联想希望用平台打通,以产品组合的方式,打造更可满足当下AI需求的基础设施集群,画出属于中国AI的山脊。

AI时代,智算就是山脊

如果一片土地没有山脊保护,就很容易受到风沙与冷空气的侵蚀,从而各种自然灾害频发。中华文明能够延绵不绝,也有赖于几条雄伟山脊的护佑。

在AI领域,如果说算法是土壤,应用是庄稼,那么算力就是保护这片土地的山脊,只有山脊够高够强,土地才有蓬勃生机。

2023年,中国出现了“百模大战”的盛况,涌现出了庞大的AI应用场景与相应的智算需求。

根据《2023—2024年中国人工智能计算力发展评估报告》,2023年中国AI算力市场规模将达到664亿元,同比增长82.5%。预计到2030年,人工智能驱动的全球算力将增长500倍。

过快的AI算力需求扩张,带来了一系列相关问题。如果说AI算力是整个AI产业生态的山峦屏障,那么今天的情况就是AI算法与应用发展过快,社会各界对AI期望极大。在基础设施层,我们需要快速去填补AI算力的空白,为中国AI筑起算力高山。

想要实现这个目标,需要破解几项关键的挑战。中国AI算力当前的核心难点在于:

1.算力供需失衡。AI算力处在供给远不能满足需求的情况,且将长期保持。这就需要我们珍惜已有且面向未来的所有AI算力,最大化满足多元智算需求。

2.算力应用卡点多。企业应用AI算力,需要依赖于多层级的智能化基础设施,端、边、云、网等条件缺一不可,需要进行全方位适配AI算力的基础设施更新。在企业智算实践中,面临着诸如针对场景匹配算法,提升AI算力利用率等问题。能力多样、切中要害的异构智算平台建设迫在眉睫。

3.算力生态不完善。智算基础设施的推广和普及,需要依赖软硬件多方面的适配,以及行业开发者的配合,这就导致智算生态的建设至关重要。

面对这些问题与挑战,联想ISG回归基础设施更新的基本逻辑,为中国AI发展画下了一横五纵的山脊。

一横五纵,画出山川连绵

想筑造AI时代的智算山脊,需要先有一张蓝图。

在下笔画这张蓝图之前,需要先思考两个问题。横向来看,AI时代多元计算成为必然趋势,需要一个平台承载广泛且多元的算力需求。纵向来看,AI大模型的训推效果取决于诸多条件,存、算、网等基础设施缺一不可。

横可承载智算,纵有产品周全,这样的“画意”驱动着联想落笔画出智算山川。在联想的“AI for All”战略下,联想ISG推动了基础设施领域全面适配AI的深入变化,以“端-边-云-网-智”新IT架构打造混合式AI基础设施。

wKgZomYpLk2AH51QAACQwskGG_A031.jpg

(联想集团副总裁、中国基础设施业务群总经理陈振宽)

联想集团副总裁、中国基础设施业务群总经理陈振宽认为,“在人工智能1.0时代,基于全球智慧和本地创新,联想打造了全面的基础设施产品组合,包括计算、存储、网络、边缘和超融合,并在通用计算、科学计算和AI计算等不同算力领域获得大量的最佳实践,帮助千行百业的客户取得成功”。陈振宽表示,“如今大模型开启的AI 2.0时代已经迈着大步朝我们走来,我们需要重塑过去积累的技术,来全面升级联想基础设施”。

分析联想在AI基础设施层面的策略与行动,可以将其归纳为“一横五纵”。

“一横”,即异构智算平台。

通过实现对通用计算集群、科学计算集群和AI算力集群进行统一管理,并对多种CPUGPU、DPU等处理器进行异构管理调度,联想打造了更加符合AI计算需求的异构算力底座。

在AI基础设施领域,联想聚焦三大领域的创新。首先是为用户匹配经过验证优化的最佳算力。第二是赋能用户充分利用算力,提升计算效率。第三则是以先进的液冷技术帮助用户节能增效且突破芯片散热的瓶颈。

wKgZomYpLk6ANf0iAAaVeItMOUA654.jpg

联想万全异构智算平台,汇集了这三大能力,为AI 2.0时代带来了五大技术创新,其中包括:

1.用户智能匹配算力的算力匹配魔方。基于海量的硬件评测和AI算子算法集成工作,联想构建了AI场景与算法与集群硬件三者匹配关系的算力魔方知识库,来标识AI场景、算法、集群配置这三者的匹配关系。用户只需输入场景和数据,算力魔方即可自动加载最优算法,并调度最佳集群配置。

wKgaomYpLk-Aan5zAAWDr1h89Q0801.jpg

2.逼近GPU算力极限的GPU内核态虚拟化。联想研究院开发了在GPU驱动层的内核态虚拟化算法,新算法可以将虚拟化造成的GPU算力损耗降到5%以下,极致情况可以降到1%以下,大幅提升GPU利用率。

3.提升网络通信效率的联想集合通信算法库。可实现对多类型网络拓扑的实时感知,并以先进算法使数据在拓扑中以最佳路径进行传输。以千卡规模集群为例,采用集成了联想集合通信库的联想异构智算平台做管理调度,可使网络通信效率提升超10%,并且集群规模越大,效果越显著。

4.减少AI训练中断时间的AI高效断点续训技术。联想异构智算平台对大量的AI训练故障进行了特征采样,开发了预测AI训练故障的AI模型,实现“用AI来预测AI”。在断点前提前优化备份,由此能将断点续训恢复时间缩减到分钟级,大幅提升训练效率,以千卡集群为例,每月可节约上百万元算力费用支出,让宝贵的AI算力持续可用。

5.AI与HPC集群超级调度器。针对混合集群做资源共享需求,联想AI与HPC超级调度器架构于AI和HPC调度之上,能够切换AI和HPC的调度,从而满足科学计算等场景的HPC与AI计算间的调度需求。它可以切换“语言”分别指挥AI和HPC调度器,可跨集群全局动态管理和调度算力资源,一小时内自动完成跨集群资源调度和共享。

在五大技术创新的合力下,异构智算平台形成了一个能高度自动化完成AI全流程开发的平台。

wKgaomYpLlCAT6NOAAFZsCMQrE4103.jpg

从用户视角看,向平台输入场景需求和数据后,即可将计算过程交给平台自动完成,平台就像一个计算魔盒,能够自动优化数据和模型,自动匹配和调度算力,自动对计算的全过程进行监控,直到最终输出模型或是推理服务。

以异构智算平台为基础,企业多样化、实践化的AI算力需求都可以得到妥善满足,并且能够获得高可用、高效率、高能效的AI计算体验。

AI算力需要与软硬件基础进行配合,才能得到最大化的价值释放。因此,联想打造了“五纵”,即服务器,存储,数据网络,软件及超融合以及边缘基础设施产品。

在基础设施市场中,联想多样化的产品取得了显著优势。根据IDC发布的《2023第四季度中国 x86服务器市场追踪报告》显示,联想环比增速居中国x86服务器市场第一,领先市场整体增速80个百分点。而在去年11月举办的第五届中国超级算力大会(ChinaSC 2023)公布的最新一期“中国高性能计算机 TOP100 排行榜”中,联想上榜43套,获得年度数量总份额冠军。这也是联想第九次问鼎并蝉联中国高性能计算TOP100数量份额第一。

通过五大产品线的并行与配合,可以满足中国AI基础设施广泛而多元的迭代需求。

以一横五纵的山脊为基础,智算生态可以生生不息,智算应用可以旷野花开。

山青水绿,滋养生态万全

有了山脊护佑,还需要在山脊间的平原播种万物,培育生态。为了让一横五纵的智算山脊真正发挥价值,联想还需要为智算生态添加动力。

在异构智算的大潮下,联想基础设施业务群成功跻身人工智能基础设施领域全球三甲。与此同时,联想基础设施业务群正在中国市场开启一场复兴之旅。去年,在中国市场实现了销售额21%的大幅增长,并且赢回了一系列重要客户。在进一步挖掘智算潜力,激活市场空间,联想需要生态的支持,也需要为生态伙伴创造发展机遇。

为此,联想希望在智算领域搭建一个万全生态。所谓万全,是指生态包罗万法,可以保用户算力以周全,保用户的AI基础设施投资回报以周全

为了搭建这样的生态,联想希望在生态中贡献硬件能力和异构智算平台的集群管理调度能力,并且要实现对算力生态的包容,即硬件会兼容xPU生态硬件,异构智算平台会集成xPU底层软件,并且以extended UI的方式对接集成AI工具链生态,让各类智算需求都能在开放的平台生态中得到满足。

wKgZomYpLlCABUfCAAWJyjl5aYI582.jpg

在Tech World的“异构智算 多元生态”联想智算产业生态创新论坛上。联想集团与中国智能计算产业联盟共同发起并成立异构智算产业生态联盟,联合产业头部生态伙伴共建联想万全生态。据介绍,异构智算产业生态联盟框架由AI芯片层、AI设备与系统层和AI平台与应用层,能够实现从IaaS平台、AI训练与推理到行业场景解决方案的全覆盖。

目前,异构智算产业生态联盟首批共计13家成员单位已加盟。生态联盟成立后,将陆续发布异构智算最新成果,计划推动《国际人工智能算力性能排行榜——AIPerf500》评选,共创及发布《异构智算白皮书》以及《2024国家行业发展报告(智能计算方向)》等内容,引导中国智算产业健康发展。

面向未来,万全异构智算生态将为处于算力选择期的中国用户提供丰富的一站式的方案来适应多样化的AI应用场景,并且将通过生态全链条的紧密合作调优,不断提升算力效率,破解AI带来的算力荒与能耗荒。

异构智算生态的蓬勃发展下,我们已经可以在一横五纵的智算山脊中,看到中国智算生态的盎然生机。

山泽浩瀚,以振智能中国

在技术与产品的山脊下,在智算生态的勃发中,联想的智算能力正在一个个产品,一个个案例中生长出来。

在产品方面,不久之前联想刚刚成功交付了可搭载国产AI算力芯片的联想问天WA5480 G3服务器。其具备多芯算力、灵活拓扑、安全可靠三大特色,能够满足自主化与AI算力需求的双重结合。

wKgaomYpLlGAJz4WAACkNxEYW9Q005.jpg

在应用方面,联想已经成为大量领军企业的智能化合作伙伴,异构智算的价值释放到了千行百业当中。在吉利汽车、紫金云、阿里云等核心用户的应用案例中,都可以见到联想一横五纵产品带来的惊喜。

一横五纵战略的核心落脚点,在于“实”。

归根结底,将AI大模型从一种技术上的可行性,变为千行百业生产场景中的可用性,需要一系列先决条件的搭建和满足。异构计算、算法匹配、能耗问题、生态合作需求等问题,都摆在从AI大模型到新质生产力之间。二者之间,什么都不做就是万水千山,有心为之就是通衢大道。

联想ISG打造的一横五纵,就是这样一条通衢。其从现实场景,真实行业的智算需求出发,有问题就解决问题,需要产品就打造产品,需要生态就建设生态。最终让AI的山泽浩瀚,借由智算山脊的地势,流入千行百业的田野。

新质生产力,由此而盘活;中国产业智能化的脚步,由此而加速。

在智算山脊之下,中国AI正草长莺飞,蓬勃万全。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 联想
    +关注

    关注

    3

    文章

    2532

    浏览量

    62464
  • AI
    AI
    +关注

    关注

    87

    文章

    27461

    浏览量

    265130
  • 智算中心
    +关注

    关注

    0

    文章

    30

    浏览量

    1400
收藏 人收藏

    评论

    相关推荐

    联想全球供应商大会:瑞萨电子荣膺双奖,共绘AI创新蓝图

    在五月的深圳,一场汇聚全球智慧与创新的盛会——联想集团全球供应商大会盛大召开。此次大会以“AIVOLUTION 拥抱AI 共创美好”为主题,吸引了上千家联想供应链的合作伙伴共襄盛举,共同探索A
    的头像 发表于 06-22 14:09 403次阅读

    AI联想松了口气

    但也没完全松。联想集团的AI“豪赌”获得一次短暂的胜利。2024年5月23日,联想集团公布了截至2024年3月31日的2023/2024财年第四财季(即2024年第一季度)以及全财年财报。由于上半
    的头像 发表于 05-31 08:05 114次阅读
    <b class='flag-5'>AI</b>让<b class='flag-5'>联想</b>松了口气

    华为悬红200万全球求解难题 存储技术和AI新型数据底座

    华为悬红200万全球求解难题   存储技术和AI新型数据底座       早在2019年,为加速科研成果产业化,突破关键技术难题;华为就已经开始每年发布奥林帕斯难题百万悬红“奥林帕斯
    的头像 发表于 05-27 18:10 704次阅读

    联想与高通、微软联手推出新一代AI PC

    联想集团近日推出了搭载高通骁龙X Elite处理器的两款全新AI PC——联想Yoga Slim 7x和联想ThinkPad T14s Gen 6,标志着个人电脑领域的新里程碑。
    的头像 发表于 05-22 09:33 207次阅读

    AI PC来了!YOGA AI PC系列新品亮相联想创新科技大会

    4月18日上午,以“AI for All,让世界充满AI”为主题的2024联想创新科技大会Tech World在上海举行。会上,联想与全球顶尖的AI
    的头像 发表于 04-18 18:45 969次阅读
    真<b class='flag-5'>AI</b> PC来了!YOGA <b class='flag-5'>AI</b> PC系列新品亮相<b class='flag-5'>联想</b>创新科技大会

    联想携手京东,紧扣大模型和生成式AI技术

    联想与京东携手,紧扣大模型和生成式AI技术带来的产业机遇,在多个领域展开深入合作。
    的头像 发表于 04-12 10:27 404次阅读

    联想向燧弘华创交付首台搭载国产AI算力芯片的问天WA5480 G3服务器

    3月19日,在联想集团(全球)最大的智能计算设备研发和制造基地——联宝科技,联想集团向燧弘华创交付联想首台可搭载国产AI算力芯片的联想问天W
    的头像 发表于 03-22 09:40 417次阅读

    联想4月18日发布AI PC新品,引领AI PC时代

    联想观点,适应未来趋势,PC产业即将步入基于大模型技术的AI PC阶段,引领PC市场进入第三个重要代际更迭。于是,AI PC的一些关键特性得以揭示出来
    的头像 发表于 03-21 15:28 427次阅读

    联想首台可搭载国产AI算力芯片的联想问天WA5480 G3服务器成功交付

    3月19日,在联想(全球)最大的智能计算设备研发和制造基地——联宝科技,中国领先的智能IT基础设施提供商联想续写智算新篇章:联想首台可搭载国产AI
    的头像 发表于 03-20 10:36 253次阅读

    联想首台搭载国产AI算力芯片服务器成功交付

    联想(全球)最大的智能计算设备研发和制造基地——联宝科技,一场科技界的盛事吸引了业界的广泛关注。这一天,中国领先的智能IT基础设施提供商联想成功交付了首台可搭载国产AI算力芯片的
    的头像 发表于 03-20 09:42 390次阅读

    联想今年将发布AI OS操作系统

    联想正式宣布,将把AI PC和个人Agent作为2024年的核心业务推进重点,并计划在今年内推出全新的“AI OS操作系统”以及一系列搭载此系统的“AI PC”。这一创新举措标志着
    的头像 发表于 02-18 11:10 634次阅读

    联想拯救者新品齐发,探索AI PC全新未来

    2024年是AI PC元年,犹如一幅时代画卷,描绘着生成式AI等尖端人工智能技术与个人电脑的深刻融合,勾勒出一场前所未有的技术革命。联想一直以来不断突破自我,致力于技术创新,推动科技进步,2024
    发表于 01-17 23:27 567次阅读
    <b class='flag-5'>联想</b>拯救者新品齐发,探索<b class='flag-5'>AI</b> PC全新未来

    联想发布上市两款AI PC 搭载Intel酷睿Ultra处理器

    联想发布上市两款AI PC 在2023英特尔新品发布会暨AI技术创新派对上联想同步发布了联想ThinkPad X1 Carbon
    的头像 发表于 12-15 19:12 835次阅读

    阿里平头哥发布首个 RISC-V AI 软硬栈平台

    面向多媒体 AI 增强场景的 RISC-V 栈软硬件平台。 该平台将 RISC-V 扩展性的新型 Vector、Matrix 及第三方硬件进行力抽象,并接入 OpenCV 与 CSI-NN 等弹性
    发表于 08-26 14:14

    AI算力全球前三,联想在2023年中国算力大会上发布哪些旗舰产品?

    联想集团执行副总裁兼中国区总裁刘军表示,基于对智能化变革的前瞻性布局,联想已成为独特的全栈智能产品及方案服务的厂商。联想重磅发布联想问天WA
    的头像 发表于 08-21 13:49 1838次阅读
    <b class='flag-5'>AI</b>算力全球前三,<b class='flag-5'>联想</b>在2023年<b class='flag-5'>中国</b>算力大会上发布哪些旗舰产品?