0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

数聚AI ∙ 智慧未来 | 浪潮信息存储助力企业基于大模型实现数字化创新

浪潮存储 来源:未知 2023-11-30 16:25 次阅读

2023年生成式AI和大模型的爆发,让我们面对一个变化更加快速也更加激动人心的时代,随着新质生产力和算力基础设施高质量发展的提出,算力和存储基础设施也面临着创新与破局,如何在生成式AI和大模型时代,更好地帮助企业实现数字化创新?

11月29日,由DOIT传媒举办的“数智创新 · AI未来”—2023中国数据与存储峰会在北京成功举办,浪潮信息存储产品线副总经理刘希猛和分布式存储总经理姜乐果受邀参会,分享了存储在生成式AI和大模型上的创新理念与实践,与合作伙伴和客户共同探讨通过创新发展应对快速变化的新时代。

新场景数聚AI加速企业向智能化场景变革

生成式AI和大模型与千行百业进行了全面的融合,带来了自动驾驶、智能制造、智慧医疗等AI+创新应用场景,这些新的应用场景将加速传统产业向智能化的变革。

千行百业的AI+创新应用带来了数据爆发式的增长,数据要素在产业智能化的过程中发挥着重要作用。IDC最新发布的数据显示,中国数据量规模将从2022的23.88ZB增长至2027年的76.6ZB,增长幅度为全球第一,其中企业数据量占据70%,而仅有24%的数据被用于分析或AI决策,这意味着企业将有更大的空间来挖掘数据价值。

中国非常重视数据要素的作用,发布了如《算力基础设施高质量发展行动计划》、《数据要素白皮书》、《生成式人工智能服务暂行方法》等一系列政策,推动企业在激活数据要素潜能和加速人工智能领先等方面的发展。

在AI 时代,原始数据呈现出多源多态的趋势,包括文本、图像、音频视频有感数据以及激光、毫米波、红外线等无感数据,会产生TB级乃至PB级多态数据,这一趋势给数据的存储、管理和应用带来了新的需求和挑战。

这些新的需求和挑战体现在巨量多模态数据、超大读写带宽、超高读写IOPS和全生命周期管理四个方面。姜乐果表示,随着训练模型从LLM(语言)、ALM(音频)、CV(计算视觉)、VL(多模态)到FMLM(混合模态),对数据存储的要求从PB级到EB级容量需求,从100GB带宽到TB级带宽的性能访问要求,同时还要求在多源异构数据之间实现快速转换与传输,实现生命的全生命周期管理,以及数据的安全可靠。

新存储分布式融合存储助力企业实现破局创新

面对AI时代多源多态的数据挑战,企业需要支持多种架构、具有持久性、灵活性的数据基础设施,来部署和实施生成式AI的创新应用。

浪潮信息存储一直秉持“分层解耦”的理念,提供从数据中心硬件平台、大模型智算软件栈OGAI和基础大模型完整的全栈解决方案,以应对生成式AI和大模型时代的全面需求和挑战。其中解决数据多模多态需求和挑战的就是分布式融合存储平台。

浪潮信息存储面向生成式AI的分布式融合存储解决方案结合生成式AI和大模型的数据采集、数据准备、数据训练、数据推理和数据归档的五个阶段,由同一套存储提供端到端的数据流支持流程,满足面向文本、音频、图像、视频、代码以及多模态和全模态的模型的需求,具有极致融合、极致容量、极致性能和极致管理四大特点。

极致融合是面向海量、多源、异构非结构化数据场景,融合多种存储介质、多协议实时互访互通、系统扁平扩展,可以用一套存储实现多模态场景应用;极致容量是从PB级到EB级甚至是ZB级,通过多种容量算法的加持,让存储空间利用达到最优,让客户的投资收益最大化;极致性能是通过对存储性能的极致提升,带来了超大带宽和超高IOPS,满足了生成式AI和大模型场景对存储的苛刻要求;极致管理提供了闪存、磁盘、磁带、光盘四种介质,以及提供了热温冷冰四种存储资源,实现了资源的互通,可以实现数据全生命周期的管理。

刘希猛认为,在非结构化数据爆发的生成式AI和大模型时代,无论基于高性能文件、流式对象还是原生大数据的智能化应用,浪潮信息的分布式存储平台都将成为企业简化IT部署和实施生成式AI创新的关键支撑。

新实践在源大模型和企业AIGC上的创新实践

作为全球领先的IT 基础设施产品、方案及服务提供商,浪潮信息已经建立了面向大模型应用场景的整体解决方案。

2023年10月,浪潮信息帮助中科大升级其校级“融合计算平台”,部署了25个GPU服务器节点和40个分布式融合存储节点,来满足不同学科、领域产生的海量多模态数据需求,助力AI驱动下的高水平科研创新。

在助力企业应用生成式AI和大模型实现数字化创新上,浪潮信息不仅提供了数据中心和硬件平台,还基于数据基础设施的领先性,为企业提供了大模型智算软件栈OGAI和基础大模型“源2.0”。

刘希猛介绍,大模型智算软件栈OGAI“元脑生智”是浪潮信息面向以大模型为核心技术的生成式AI开发与应用场景,提供从集群系统环境部署到算力调度保障和大模型开发管理的全栈全流程的软件,从而降低大模型算力系统的使用门槛、优化大模型的研发效率,保障大模型的生产与应用。

源大模型是浪潮信息存储支持生成式AI和大模型的最佳实践。11月27日基于浪潮信息大模型整体方案的“源2.0”大模型正式发布,并全面开源,这也将会更好地满足企业大模型开发和应用的需求,推动企业的应用创新。

在“源1.0”中文语言大模型的训练中,AS13000就采用最新硬件平台,搭载全闪SSD和高速IB网络,支撑“源1.0”的训练过程高效完成。在刚刚发布的“源2.0”大模型中,浪潮信息存储更是作为模型训练的基座,为数据的采集、预处理、训练和归档起到了不可忽视的助力,高灵活可扩展的容量为“源2.0”获取12个PB中文数学数据提供了坚实的后盾,使模型训练在容量方面不存在瓶颈。

wKgaomVoSAuARcliAADAmPyYtU4461.jpgwKgaomVoSAyAf-LaAAC_y0frv_s035.jpg

在2023中国数据与存储峰会上,浪潮信息存储还获得了“2023年度高端存储产品金奖”和“2023年年度存储技术创新奖”。

2022年,浪潮信息存储继续实现了高速增长,存储装机量位列全球前三,分布式文件存储装机量位列中国第一。浪潮信息的集中式存储被某大行用户应用,最大装机量达到近千套,用户将存储部署在云化“两地三中心”中,支撑了超过100个金融应用。分布式存储连续5年入围全球最大的电信运营商集采,有近1000套、超过1万个分布式存储节点应用在各种场景和业务上。在过去的一年,浪潮信息存储实现了金融行业的六大行、股份制、城商行等用户的全面突破。

浪潮信息未来将会继续秉持着创新的服务理念,基于浪潮信息的基础平台能力和源自JDM的存储场景共同体定制能力,持续将先进的产品、技术、解决方案带给企业,与客户和合作伙伴一起携手共行,帮助企业加快实现数字化转型和创新,加速实现高质量发展,服务未来数字化转型。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 存储
    +关注

    关注

    13

    文章

    4257

    浏览量

    85646
  • 浪潮
    +关注

    关注

    1

    文章

    450

    浏览量

    23808

原文标题:数聚AI ∙ 智慧未来 | 浪潮信息存储助力企业基于大模型实现数字化创新

文章出处:【微信号:inspurstorage,微信公众号:浪潮存储】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    浪潮信息AI存储性能测试的领先之道

    MLCommons,一个致力于推动全球 AI系统发展的顶级工程联盟,汇聚了包括谷歌、斯坦福大学在内的众多顶尖企业和研究机构。作为该联盟的创始成员之一,浪潮信息自2020年起便积极参与其中,共同探索
    的头像 发表于 10-29 16:30 193次阅读
    <b class='flag-5'>浪潮信息</b><b class='flag-5'>AI</b><b class='flag-5'>存储</b>性能测试的领先之道

    浪潮信息:元脑企智EPAI助力金融大模型快速落地

    近日,2024金融科技应用创新发展大会暨农村金融机构信息化发展创新座谈会在上海举办。浪潮信息推出元脑企智EPAI企业
    的头像 发表于 09-20 16:07 303次阅读
    <b class='flag-5'>浪潮信息</b>:元脑企智EPAI<b class='flag-5'>助力</b>金融大<b class='flag-5'>模型</b>快速落地

    物联网公司的数字化转型之旅

    无形的网,将万物互联,让数据流动,推动社会向更加智能、高效、可持续的方向发展。那么,在这场变革中,英电子如何把握机遇,助力企业实现自身的数字化
    的头像 发表于 08-23 16:09 240次阅读

    长擎安全操作系统24与浪潮信息HF/AS存储系列成功兼容

    数字化转型浪潮席卷全球的今天,信息安全与数据存储的稳定高效成为企业不可忽视的两大核心要素。近日,一项重要的技术兼容性测试认证结果揭晓,标志
    的头像 发表于 07-22 16:20 641次阅读

    浪潮信息推出AIGC存储解决方案

    近日,在科技创新浪潮中,浪潮信息成功举办了“元脑中国行”全国巡展的杭州站活动,此次盛会不仅汇聚了业界的精英与目光,更见证了浪潮信息在AIGC(人工智能生成内容)领域的一次重大突破。会
    的头像 发表于 07-03 11:16 674次阅读

    CCF-TCIST走进浪潮信息 共话AI时代存储创新

    CCF信息存储技术专委会走进浪潮信息 共话大模型时代的存储创新之道 北京2024年6月7日 /美
    的头像 发表于 06-07 14:27 265次阅读
    CCF-TCIST走进<b class='flag-5'>浪潮信息</b> 共话<b class='flag-5'>AI</b>时代<b class='flag-5'>存储</b><b class='flag-5'>创新</b>

    毕昇大模型应用开发平台+浪潮信息AIStation,让大模型定制更简单

    北京2024年6月5日 /美通社/ -- 近日,毕昇大模型应用开发平台与浪潮信息AIStation智能业务生产创新平台完成兼容性互认证。基于毕昇和浪潮信息AIStation,用户通过预
    的头像 发表于 06-05 11:58 394次阅读
    毕昇大<b class='flag-5'>模型</b>应用开发平台+<b class='flag-5'>浪潮信息</b>AIStation,让大<b class='flag-5'>模型</b>定制更简单

    浪潮信息发布AS13000G7-N系列分布式全闪存储

    浪潮信息近日推出了专为大型AI模型优化的AS13000G7-N系列分布式全闪存储。该系列基于浪潮信息自研的分布式文件系统,结合新一代数据加速
    的头像 发表于 05-14 10:03 518次阅读

    为大模型专门优化 浪潮信息发布分布式全闪存储AS13000G7-N系列

    DataTurbo,通过盘控协同、GPU直访存储、全局一致性缓存等技术为AI模型数据归集、训练、数据归档与管理等阶段提供强大存储支撑能力,助力
    的头像 发表于 05-10 16:37 406次阅读
    为大<b class='flag-5'>模型</b>专门优化 <b class='flag-5'>浪潮信息</b>发布分布式全闪<b class='flag-5'>存储</b>AS13000G7-N系列

    浪潮信息发布企业模型开发平台&quot;元脑企智&quot;EPAI,加速AI创新落地

    北京2024年4月18日 /美通社/ -- 4月17日,在2024浪潮信息生态伙伴大会(IPF2024)上,浪潮信息发布企业模型开发平台"元脑企智"EPAI(Enterprise P
    的头像 发表于 04-18 21:21 430次阅读
    <b class='flag-5'>浪潮信息</b>发布<b class='flag-5'>企业</b>大<b class='flag-5'>模型</b>开发平台&quot;元脑企智&quot;EPAI,加速<b class='flag-5'>AI</b><b class='flag-5'>创新</b>落地

    浪潮信息发布企业模型开发平台“元脑企智”EPAI

    4月17日,在2024浪潮信息生态伙伴大会(IPF2024)上,浪潮信息重磅发布企业模型开发平台“元脑企智”EPAI(Enterprise Platform of
    的头像 发表于 04-18 10:12 362次阅读
    <b class='flag-5'>浪潮信息</b>发布<b class='flag-5'>企业</b>大<b class='flag-5'>模型</b>开发平台“元脑企智”EPAI

    浪潮信息&quot;源2.0&quot;大模型YuanChat支持英特尔最新商用AI PC

    % 。企业可以在全新的英特尔商用客户端AI PC上,使用AI PC大模型效率工具"YuanChat"快速本地部署和运行"源2.0"大
    的头像 发表于 03-27 22:52 457次阅读
    <b class='flag-5'>浪潮信息</b>&quot;源2.0&quot;大<b class='flag-5'>模型</b>YuanChat支持英特尔最新商用<b class='flag-5'>AI</b> PC

    潞晨科技Colossal-AI + 浪潮信息AIStation,大模型开发效率提升10倍

    北京2024年2月29日 /美通社/ -- 近日,潞晨科技Colossal-AI模型开发工具与浪潮信息AIStation智能业务创新生产平台完成兼容性互认证。基于AIStation平
    的头像 发表于 03-01 09:43 453次阅读
    潞晨科技Colossal-<b class='flag-5'>AI</b> + <b class='flag-5'>浪潮信息</b>AIStation,大<b class='flag-5'>模型</b>开发效率提升10倍

    天壤加入元脑生态,携手浪潮信息企业模型开发普适

    北京2024年1月26日 /美通社/ -- 近日,上海天壤智能科技有限公司(简称"天壤")与浪潮信息签署元脑生态战略合作协议,双方将聚焦AI基础设施、大模型数据治理、模型测试评估
    的头像 发表于 01-29 09:04 746次阅读
    天壤加入元脑生态,携手<b class='flag-5'>浪潮信息</b>让<b class='flag-5'>企业</b>大<b class='flag-5'>模型</b>开发普适<b class='flag-5'>化</b>

    仪电云云操作系统获得浪潮信息澎湃技术认证

    浪潮信息希望通过此种方式与生态合作伙伴紧密互动,降低客户TCO (总体拥有成本)、缩减投产时间并促使产品和方案不断进步,进而助力各行业依托浪潮信息存储平台实施
    的头像 发表于 12-27 15:35 725次阅读