0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

从训练到推理,AI 大模型发展有哪五大趋势?IDC专家解读

章鹰观察 来源:电子发烧友网 作者:章鹰 2024-04-22 07:57 次阅读
电子发烧友原创 章鹰

2024年两会召开后,两会报告把加快发展新质生产力列为十大任务举措之首。新质生产力的核心是用新技术促进产业高端化、智能化和绿色化。ICT产业是发展新质生产力的核心支撑要求,ICT产业正在进入AI无处不在的大转型阶段。

纵观全球,2024年中国GDP增长预期5%,全球平均增长率达到2.6%,美国预期增长2%,印度最为乐观预期今年的GDP增长达到6.2%。从科教兴国的战略看,新质生产力主要涉及的是数字中国的底层基础技术,AI 无处不在,从2022年,ChateGPT3.5发布以来,全球掀起了生成式AI 的热潮。到了2024年,大家都在考虑生成式AI到底给企业带来了哪些价值。

IDC最新的调研显示,28%的受访者表示在过去投资了生成是AI不到一年时间就看到了投资回报,每投资1美元,平均可以获得3.5倍的投资回报,投资回报率最高的用例是自动化IT任务,达到46.5%,也有高达27.1%受访者选择产品与服务创新。AI大模型在使用当中,实际应用开发过程中,开源大模型和商业化模型同时并存,开发者更加倾向于使用开源模型。而且IDC调研显示,数据仓库作为生成式AI 的数据平台发挥着主导作用。

生成式AI支出在全球和中国有什么差异?2024年AI大模型将呈现哪些新的发展趋势?全球AI基础设施市场规模预测?4月6日,来自IDC中国区副总裁兼首席分析师武连峰和IDC中国区副总裁钟振山做了最新解读。

生成式AI在全球和中国高速增长

IDC中国区副总裁兼首席分析师武连峰表示,IDC预测,2024年全球生成式AI支出将会达到387.9亿美元,占整体AI比例为16.7%,未来到2027年,生成式AI的全球支持将达到1454.2亿美元,年复合增长率会达到55.3%。2024年,中国生成式AI支出将达到35.3亿美元,占整体AI比例达到16%,未来到2027年中国生成式AI支出预测将达到129.3亿美元。
武连峰指出,整体ICT市场从以增量市场为主转向以存量市场为主,存量市场是小幅度增长的特征,其中企业移动软件、IoT连接、可穿戴设备、移动数据服务增长率在10%以下,增量市场主要包括AI平台、机器人相关的OT服务、AI相关的商业服务等,增长率达到18%到40%之间。

AI大模型未来发展的五大趋势

IDC中国区副总裁钟振山表示,2024年AI大模型发展呈现五大趋势。一、中国基础大模型数量趋于收敛,2024年将卷向产业。去年发布的国内大通用大模型发布达到百款,今年我们调研发现更多面向行业或者场景的大模型出现,关注大模型在行业或者企业应用场景的落地,比如网易有道的子曰、好未来的MathGPT、孩子王的KidsGPT面向教育行业,蚂蚁集团推出贞仪、百灵面向金融,还有中科闻歌的雅意大模型面向媒体行业,京东的言犀ChatJD模型面向商业应用场景,加速AI大模型在行业场景的落地。
AI大模型趋势二、开源和闭源共存,共同促进大模型应用生态走向繁荣。钟振山表示,更多企业选择开源的AI大模型来构建自身的应用,现有的开源模型参数大多数是十亿到千亿之间,基于MoE架构的稀疏大模型参数可以达到万亿参数,微调和多种计算资源并行技术变得十分重要。他强调,AI 进入一个变革期,大家关注三个方向:第一、如何快速部署和开发模型;第二、大模型的压缩量化蒸馏;第三、如何搭建一套有效的开源生态,以及不同CPUGPU和XPU的分配。

AI大模型趋势三、大模型向端侧转移,AI推理引起广泛关注。苹果计划推出更智能的Siri, 为端侧大模型生态做积极准备,国内手机厂商华为、小米、Vivo、OPPO和荣耀都推出了手机端大模型,华为手机适配盘古大模型,小米推出MiLM大模型,Vivo适配蓝心大模型,OPPO和荣耀分别推出了安第斯大模型和魔方大模型。AI推理将在手机、PC、耳机、音箱、XR、汽车,以及其他可穿戴新型终端上运行。

钟振山分析说,端侧大模型带来三大优势:1、本地数据处理效率更高,节省云端服务器带宽和算力成本;2、对用户数据可以形成更好的隐私保护;3、端侧大模型可以带来更多交互方式和新体验。

AI大模型趋势四、多模态发展可能会促进市场出现杀手级应用。现在生成式AI 主要在文本、视频、图像、音频领域应用。GPT是基于自然语言技术,对话聊天机器人已经普遍出现,现场他也介绍一家公司通过训练AI垂类模型,初步实现文字生成剧本+漫画+动态视频。

AI大模型趋势五、新一代AI基础设施可能成为下一个战场。新架构主要指灵活调配CPU和GPU资源,边缘计算将云服务扩展到远程,私有云解决数据和运营的合规性问题,高性能主要针对高性能计算和人工智能优化的计算和存储服务,多云集成促进管理和安全的工具,深化合作伙伴关系,主要与行业用户、基础设施提供商和ISV搭建桥梁。
钟振山指出,AI主要用于训练和推理,从训练看,还是云上和本地部署为主的投资方式,推理市场主要是云上算力为主,但是本地、边缘层面都有大量推理算力的需求。推理市场需要一种面向AI工作负载的混合架构模式。

未来随着生成式AI和大模型在企业内部落地之后,在推理方面的需求会大于训练的需求。面向AI的基础架构,包括高性能处理器、下一代存储、超融合系统、高性能AI网络,甚至精密计算、数据中心技术,未来的量子计算都可能成为AI基础架构市场的基石。IDC预测,到2027年,用于边缘推理的AI服务器价值将超过用于本地推理的服务器价值。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI芯片
    +关注

    关注

    17

    文章

    1852

    浏览量

    34883
  • 大模型
    +关注

    关注

    2

    文章

    2298

    浏览量

    2411
  • 生成式AI
    +关注

    关注

    0

    文章

    481

    浏览量

    452
  • AI大模型
    +关注

    关注

    0

    文章

    307

    浏览量

    280
收藏 人收藏

    评论

    相关推荐

    FPGA和ASIC在大模型推理加速中的应用

    随着现在AI的快速发展,使用FPGA和ASIC进行推理加速的研究也越来越多,目前的市场来说,有些公司已经了专门做
    的头像 发表于 10-29 14:12 188次阅读
    FPGA和ASIC在大<b class='flag-5'>模型</b><b class='flag-5'>推理</b>加速中的应用

    未来AI模型发展趋势

    未来AI模型发展趋势将呈现多元化和深入化的特点,以下是对其发展趋势的分析: 一、技术驱动与创新 算法与架构优化 : 随着Transformer架构的广泛应用,
    的头像 发表于 10-23 15:06 414次阅读

    摩尔线程携手东华软件完成AI模型推理测试与适配

    Agent平台。该平台集成了摩尔线程提供了软硬一体化、训练到部署的系统级解决方案,涵盖自研大语言模型MUSAChat、推理引擎MT Transformer以及大
    的头像 发表于 07-31 10:51 673次阅读

    ai模型训练方法哪些?

    AI模型训练方法是一个复杂且不断发展的领域。以下是ai模型
    的头像 发表于 07-16 10:11 1310次阅读

    解读PyTorch模型训练过程

    PyTorch作为一个开源的机器学习库,以其动态计算图、易于使用的API和强大的灵活性,在深度学习领域得到了广泛的应用。本文将深入解读PyTorch模型训练的全过程,包括数据准备、模型
    的头像 发表于 07-03 16:07 880次阅读

    进一步解读英伟达 Blackwell 架构、NVlink及GB200 超级芯片

    。 **英伟达Blackwell架构在数据中心方面的应用哪些?** 1. **AI **大模型训练 Blackwell 架构的 GPU 针对当前火爆的
    发表于 05-13 17:16

    【大语言模型:原理与工程实践】揭开大语言模型的面纱

    的进步,大语言模型的应用范围和影响力将持续扩大,成为AI领域的重要推动力。其中,GPT系列模型发展尤为引人注目,GPT到GPT-2,再到
    发表于 05-04 23:55

    AI推理,和训练什么不同?

    如果要用一句话概括AI训练推理的不同之处,我觉得用“台上一分钟,台下十年功”最为贴切。话说小明已经和心目中的女神交往数年,在邀约女神出门这件事上积累了大量的经验数据,但却依然捉摸不透其中的玄机
    的头像 发表于 04-29 08:06 210次阅读
    <b class='flag-5'>AI</b><b class='flag-5'>推理</b>,和<b class='flag-5'>训练</b><b class='flag-5'>有</b>什么不同?

    训练到推理AI模型发展五大趋势IDC专家最新解读

    生成式AI支出在全球和中国有什么差异?2024年AI模型将呈现哪些新的发展趋势?全球AI基础设施市场规模预测?4月16日,在
    的头像 发表于 04-17 16:07 2103次阅读
    <b class='flag-5'>从</b><b class='flag-5'>训练到</b><b class='flag-5'>推理</b>,<b class='flag-5'>AI</b> 大<b class='flag-5'>模型</b><b class='flag-5'>发展</b><b class='flag-5'>有</b><b class='flag-5'>哪</b><b class='flag-5'>五大趋势</b>?<b class='flag-5'>IDC</b><b class='flag-5'>专家</b>最新<b class='flag-5'>解读</b>

    Groq LPU崛起,AI芯片主战场训练转向推理

    人工智能推理的重要性日益凸显,高效运行端侧大模型AI软件背后的核心技术正是推理。不久的未来,全球芯片制造商的主要市场将全面转向人工智能推理
    的头像 发表于 02-29 16:46 1083次阅读

    黑马Groq单挑英伟达,AI芯片要变天?

    AI训练到AI推理
    的头像 发表于 02-26 12:01 300次阅读

    混合专家模型 (MoE)核心组件和训练方法介绍

    ) 的 Transformer 模型在开源人工智能社区引起了广泛关注。在本篇博文中,我们将深入探讨 MoEs 的核心组件、训练方法,以及在推理过程中需要考量的各种因素。 让我们开始吧! 简短总结 混合
    的头像 发表于 01-13 09:37 1158次阅读
    混合<b class='flag-5'>专家</b><b class='flag-5'>模型</b> (MoE)核心组件和<b class='flag-5'>训练</b>方法介绍

    AI算法在RZ/V芯片中的移植推理流程

    之前文章已介绍了一些AI算法Demo的应用 ,我们提供模型训练到RZ/V系列嵌入式端推理应用的完整流程。整体流程如下图所示。
    的头像 发表于 12-20 12:21 1014次阅读
    <b class='flag-5'>AI</b>算法在RZ/V芯片中的移植<b class='flag-5'>推理</b>流程

    在线研讨会 | 大模型时代语音 AI 模型训练、优化与应用

    通过业界领先的技术,帮助企业能够快速部署定制化 AI 智能语音端到端流程。 2023 年 12 月 19 日和 21 日 晚间 ,来自 NVIDIA 和 Kaldi 项目的技术专家将做客 Datafun 社区直播间 ,为您介绍如何
    的头像 发表于 12-15 15:50 560次阅读
    在线研讨会 | 大<b class='flag-5'>模型</b>时代语音 <b class='flag-5'>AI</b> <b class='flag-5'>模型</b>的<b class='flag-5'>训练</b>、优化与应用

    HarmonyOS:使用MindSpore Lite引擎进行模型推理

    场景介绍 MindSpore Lite 是一款 AI 引擎,它提供了面向不同硬件设备 AI 模型推理的功能,目前已经在图像分类、目标识别、人脸识别、文字识别等应用中广泛使用。 本文介绍
    发表于 12-14 11:41