0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

大模型引爆市场,训推一体机成算力行业趋势

Carol Li 来源:电子发烧友网 作者:李弯弯 2023-12-05 00:14 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

电子发烧友网报道(文/李弯弯)2022年底,以ChatGPT为标志的生成式AI场景引爆市场,引发了全行业对于AI大模型等技术的关注,AI发展跨越拐点,大模型逐渐成为新一轮科技革命和产业变革的重要驱动力量。然而大模型的训练和部署需要大量的计算资源。

训推一体机成为算力行业趋势

今年7月,华为携手伙伴联合发布昇腾AI大模型训推一体化解决方案,加速大模型在各行业应用落地,并有23家昇腾AI伙伴推出AI服务器、智能边缘与终端新品,共同为行业智能化升级提供丰富的产品与解决方案。

昇腾一体机主要是为特定的AI应用设计的集成解决方案。它们整合了昇腾AI处理器、软件平台、开发工具和其他关键组件,如存储和网络设施,以提供针对特定AI任务(如深度学习、图像处理)的优化性能。这类设备通常更加用户友好,支持即插即用,特别适合于那些需要快速部署并立即投入使用AI技术的场景。

业界认为,训推一体机是适合我国市场的优选解决方案。当前我国大模型产业正高速发展,与此同时,技术变革带来的大模型应用研发周期长、研发门槛高、业务安全隐患等问题一定程度上阻碍里技术落地,尤其是在中国存在大量的G 端和B 端客户,而训推一体机很好地解决了这些痛点:

开箱即用,直接享用新技术成果。训推一体机可实现定制化的大模型应用软硬一体解决方案,一般可集成优选的成熟大模型产品,厂家可以协助大模型预训练定制、微调定制、训练标注、技术培训等;

2、简化部署,一般一体机均会提前做好适配调优,算法迁移,帮助客户简化大模型部署;3、数据安全,我国高度重视数据安全,尤其是政企客户,常规链接通用大模型存在数据泄露安全隐患,政府等客户更希望能本地化部署,训推一体机可完成本地训练和推理,解决大模型应用数据安全难题,试用于高安全要求场景和客户。

对于训推一体机市场需求情况,云从科技此前对媒体表示,对于国产信创需求的增加和对合规、私有化部署的重视,对数据要素和基于大模型的应用侧变化的重视,预计将会涌现出较大的应用场景,市场规模庞大,尤其在IT部分的升级和场景需求明确的私有化部署方面,将有巨大的市场机会。

训推一体机已在多个场景实现落地

据介绍,昇腾AI训推一体机单体价值量比昇腾服务器提高了很多,可以将其理解为昇腾服务器叠加大模型私有化部署迁移。根据中国招标投标公共服务平台公告,中贝通信和恒为科技分别中标了AI算力一体机采购项目,该项目采购总价为21.12亿元,单价为440万元。

众多厂商与华为携手推出大模型训推一体机。云从科技表示,公司正在与华为合作推出大模型训推一体机,方式是共同打造产品。华为的代工厂会将芯片与云从的大模型集成,然后共同推广给客户。云从在这个合作中不仅卖产品,还会提供其他应用开发相关的服务。

整个市场空间不同于以往的分成模式,而是通过联合推广的方式,与华为各地销售团队一起推广。价格上训推一体机大约在三四百万元的范围内,在中档旗舰训练部分报价大致在一百万元以下,更低端的一体机报价大约在30万左右。

云天励飞近日表示,公司联合华为于今年9月推出了大模型训推一体化产品—云天天书大模型训推一体机。该产品内置了公司自主研发的天书千亿级大模型。通过与昇腾硬件加速平台的联合深度优化,并集成“开箱即用”系列训推工具,产品可满足面向多业务场景的大模型高并发高能效处理、业务快速上线的需求。同时,产品具有丰富的接口,支持灵活的二次开发和敏捷部署。

智谱AI、昇腾、华鲲振宇在今年9月也联合预发布了三款智谱GLM昇腾大模型一体机,包括智谱-昇腾ChatGLM训推一体机、智谱-昇腾CodeGeeX代码生成一体机、智谱-昇腾ChatGLM推理一体机,旨在推动千行百业数字化转型升级。

智谱AI CEO张鹏表示,智谱AI专注于大模型的自主创新,一方面通过人工智能助手产品智谱清言将大模型能力开放给公众,另一方面也践行“模型即服务”的理念,让大模型应用落地千行百业。本次基于昇腾AI打造的大模型一体机,相信将为各行各业带来更便捷、更安全的大模型软硬件协同解决方案,推动建设更完善、健全的大模型应用生态。

此外,软通动力、科大讯飞、医渡科技、安恒信息、中软国际此前都陆续发布了其昇腾一体机解决方案,有望赋能千行百业。并且不少方案已经在诸多场景中实现落地,例如AI训练开发一体机解决方案赋能山东大学科研创新、软通动力AI机器人昇腾一体机助力深圳机场国际快件海关监管EIMS系统智能化升级等。

总结

随着科技的不断发展,人工智能已经逐渐渗透到我们生活的方方面面,从智能手机智能家居自动驾驶汽车、医疗诊断等,都离不开人工智能技术的支持。大模型的出现更是为更多领域带来助力,然而算力也因此面临挑战。而训推一体机让企业能够便捷的构建解决方案。





声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 昇腾
    +关注

    关注

    1

    文章

    188

    浏览量

    7553
  • 算力
    +关注

    关注

    2

    文章

    1680

    浏览量

    16833
  • 大模型
    +关注

    关注

    2

    文章

    3787

    浏览量

    5273
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    触拓(CHUTO)32 寸立式点餐,大屏触控点餐快人步#触拓 # 自助一体机 #点餐

    一体机
    深圳市触拓科技有限公司
    发布于 :2026年04月08日 12:23:06

    触拓(CHUTO)户外广告一体机,无惧酷暑全天候在线# 触拓 #户外触摸一体机

    一体机
    深圳市触拓科技有限公司
    发布于 :2026年04月08日 12:20:40

    燧原科技一体芯片L600适配阶跃星辰基座模型Step 3.5 Flash

    ”的 Agent 底层模型选项,从而真正融入日常开发。燧原科技的新一体芯片L600已率先完成适配,成为国内首批适配该
    的头像 发表于 02-02 17:50 1567次阅读
    燧原科技<b class='flag-5'>训</b><b class='flag-5'>推</b><b class='flag-5'>一体</b>芯片L600适配阶跃星辰基座<b class='flag-5'>模型</b>Step 3.5 Flash

    润和软件入选大模型一体机产业图谱

    格局与创新力量。在本次图谱中,江苏润和软件股份有限公司(以下简称“润和软件”)以AI全栈技术能力与丰富的行业落地实践入选图谱,成为国产智能计算领域的重要力量。 润和软件入选《大模型一体机产业图谱》 润和软件以“All
    的头像 发表于 12-10 17:56 1716次阅读
    润和软件入选大<b class='flag-5'>模型</b><b class='flag-5'>一体机</b>产业图谱

    Nullmax MaxDrive Basic智能前视一体机及小域控方案

    前视一体机产品结构紧凑,主要集成前视摄像头模组、图像处理单元 (CPU/GPU/DSP) 以及智能驾驶软件算法,可高效快速部署 ADAS 功能,是 L2 级智驾系统的优选。因此,以智能前视一体机为代表的性价比方案持续保持强劲的市场
    的头像 发表于 11-24 14:28 879次阅读
    Nullmax MaxDrive Basic智能前视<b class='flag-5'>一体机</b>及小域控方案

    品牌参差不齐,企业如何筛选优质触摸一体机?|高格欣科技

    商用触摸一体机,为市场提供参考。、品牌实力:技术积累与行业认可度是基础商用触摸一体机的品质首先体现在品牌的技术积累与
    的头像 发表于 11-08 17:09 536次阅读
    品牌参差不齐,企业如何筛选优质触摸<b class='flag-5'>一体机</b>?|高格欣科技

    基于飞腾腾云S5000C打造的多款AI一体机亮相WAIC

    ,成为本届 WAIC 大亮点,引发广泛关注。 飞腾携手中国长城研发推出的  擎天 GF7280 V5  是款  4U 8卡 AI 一体机
    的头像 发表于 07-29 17:33 3174次阅读
    基于飞腾腾云S5000C打造的多款AI<b class='flag-5'>一体机</b>亮相WAIC

    聚徽工业触摸一体机:多行业应用场景下的技术适配方案

    在当今数字化与智能化飞速发展的时代,工业触摸一体机凭借其强大的功能与便捷的操作特性,已成为众多行业实现高效生产、智能管理的关键设备。不同行业因其独特的生产环境、操作流程和功能需求,对工业触摸
    的头像 发表于 06-25 17:18 882次阅读

    工业一体机不同的安装系统对应其应用功能有何差异?

    工业一体机种集计算、控制、人机交互等功能于一体的工业自动化设备。它在各个行业中都有广泛的应用,包括制造业、物流业、工业自动化等。工业一体机
    的头像 发表于 06-24 17:14 745次阅读

    基于行业需求的工控一体机定制化技术实践

    工业场景痛点的关键路径。本文将从行业需求分析、技术实践案例、未来发展趋势三个维度,探讨工控一体机定制化技术的落地价值。 行业需求驱动的定
    的头像 发表于 06-17 17:05 851次阅读

    开普云「开悟智核」:极致性价比的智能一体机,破局大模型应用难题

    当下,AI一体机凭借开箱即用、数据可控等优势,成为行业模型落地的重要载体之。然而实际应用时,用户却面临诸多问题:算力成本与性能难以平衡;非满血版
    的头像 发表于 06-09 10:34 1320次阅读
    开普云「开悟智核」:极致性价比的智能<b class='flag-5'>体</b><b class='flag-5'>一体机</b>,破局大<b class='flag-5'>模型</b>应用难题

    DeepSeek赋能,大模型一体机破解企业AI落地难题

    数据训练、模型部署等任务,确保敏感数据不外泄。   其核心价值在于简化部署流程、降低算力使用门槛,提升AI训练与推理效率。据IDC报告,2025年中国AI大模型一体机市场规模已达数十亿
    的头像 发表于 06-09 07:13 6961次阅读
    DeepSeek赋能,大<b class='flag-5'>模型</b><b class='flag-5'>一体机</b>破解企业AI落地难题

    工业触摸一体机生产厂家分析——一体机的技术原理及发展趋势

    诸多领域。深入了解其技术原理与发展趋势,有助于企业更好地选择和应用这设备,推动工业生产的升级与变革。 、工业触摸一体机的技术原理 (
    的头像 发表于 05-21 16:25 1045次阅读