0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

星环科技推企业级AI能力运营平台Sophon MLOps 助推AI模型落地

科技绿洲 来源:星环科技 作者:星环科技 2022-05-12 17:17 次阅读

在国内政策引导、企业产业智能升级的原生需求和疫情等多重因素作用下,中国的人工智能产业化应用在过去的5年间呈现出无可比拟的增长速度。然而随着人工智能和机器学习在企业各个业务层面的应用日渐深化,模型类型和数量也都呈快速增长态势。由于不同模型之间的训练框架、部署模式、输入输出都不相同,导致异构模型难以被统一管理。同时,各部门间缺少统一的模型从开发到上线的标准化流程规范,导致模型资产散落在各个业务部门,难以被统一纳管为企业数据资产。不断增加的模型管理成本和运维复杂度,以及生产环境的不可控风险,给企业模型管理带来了一系列挑战。

为解决AI落地难的问题,星环科技的AI团队从用户需求端出发,倾力研发了一款基于云原生架构的企业级AI能力运营平台Sophon MLOps,助推AI模型落地。Sophon MLOps 是基于云原生架构构建的企业级AI能力运营平台,聚焦于机器学习模型全生命周期中的模型管理、模型部署、模型监控预警、模型评估和模型迭代等关键环节。通过统一纳管、统一运维、统一应用、统一监控、统一评估、统一解释,赋予企业客户易用、高效且安全可靠的AI能力运营服务,协助客户规模化管理日益增长的机器学习模型,提升模型使用效率,降低模型集成管理成本,控制模型生产环境风险。

Sophon MLOps针对企业AI运营的痛点,围绕企业AI模型接入、运营管理、持续训练的全生命周期,分别提供规模化集成管理、高效模型推理、模型监控预警、模型性能评估、隐私安全保障等功能,为企业的AI日常运营插上翅膀。

星环科技9

此次更新,MLOps升级至v1.1版本,在已有功能上新增功能如下:

新增模型服务批量预测功能:完善了应用场景,功能覆盖范围从原有的仅支持在线实时预测,升级为同时支持在线与离线两种模式。离线批量预测功能支持通过直接连接数据库,获取批量数据进行模型预测,并将结果写回相应库表内,实现闭环;

新增模型服务数据偏移指标监控功能:强化了模型服务在监控预警方面的能力,致力于帮助用户更全面掌握机器学习模型服务的运行状态,并通过自定义监控指标及时发现处理异常情况,规避因数据偏移等原因引起的风险;

新增模型服务监控指标配置及告警功能;

新增服务发布审批流程管理;

新增可解释机器学习XAI模块(MVP版):可处理数据分析过程中的相关性解释、过程性解释、推理性解释和因果性解释问题。用户可以精细地分析特征与结果之间的影响关系,帮助用户精准地提升DataCentric-AI数据治理能力,针对性优化模型精度,帮助用户快速定位、优化影响业务结果的重要因子,从而促使业务成功。

在金融科技行业,随着监管政策的不断收紧,银保监会于2020年7月正式出台了《商业银行互联网贷款管理行办法》,要求商业银行落实模型从开发测试、评审、监测到退出的全生命周期的风险管理。一方面为满足监管合规要求,另一方面提升行内风险模型的管理效率,银行要求对模型全生命周期进行统一管理。此外,随着行内业务的持续发展,大量异构AI模型资产散落在各部门,一旦需要使用,调参和部门间协调均使得模型部署周期拉长。

Sophon Base 3.1使用MLOps搭建了全行统一的AI模型管理平台,快速接入行内积累的不同框架或平台训练生成的大量模型文件,按版本集成管理模型资产;并建立标准化流程,统一构建模型推理逻辑的方式,支持零代码一键部署模型应用。基于云原生基础架构,打通模型全生命周期流程,实现了银行对模型应用的统一运维和监控。

平台上线后,Sophon Base集成了全行多种算法框架生成的数百个机器学习模型。部署模型应用的平均时间由1.5天降至0.5小时,配置成本降低近80%,使模型的平均迭代周期由1月降至1周。模型效率方面,支持上百个模型预测服务同时在线,单条数据实现毫秒级响应。

Sophon MLOps打通了AI的全生命周期,为企业的各类用户角色搭建了统一的AI协作平台。对于企业而言,MLOps规模化集成管理了多源异构的机器学习模型,并提供高效且保障隐私安全的模型推理、监控预警及性能评估服务;对用户而言,能感受到操作上的快捷,AI应用与部署更是如虎添翼。未来,MLOps将继续迭代更加丰富的功能,赋能企业AI更快、更好地落地。

审核编辑:彭静
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 数据
    +关注

    关注

    8

    文章

    6867

    浏览量

    88800
  • AI
    AI
    +关注

    关注

    87

    文章

    30072

    浏览量

    268337
  • 机器学习
    +关注

    关注

    66

    文章

    8373

    浏览量

    132391
  • 星环科技
    +关注

    关注

    0

    文章

    36

    浏览量

    2624
收藏 人收藏

    评论

    相关推荐

    NVIDIA NIM Agent Blueprint加速企业级AI应用落地

    在生成式 AI 时代,每个企业都在尝试构建自己的 AI 应用,来赋能企业提高业务能力,提高盈利预期,提高生产效率。
    的头像 发表于 11-13 11:35 227次阅读

    AI驱动存储需求激增,企业级SSD市场迎来国内厂商崛起

    随着人工智能(AI)应用的迅速普及,市场对高性能、高可靠性的存储产品的需求日益增长,企业级固态硬盘(SSD)因此受到了前所未有的关注。当前,全球SSD市场主要由五大原厂主导,但在中国,随着AI浪潮的推动,
    的头像 发表于 10-28 14:18 378次阅读

    Inflection AI携手英特尔推出企业级AI系统

    近日,AI初创企业Inflection AI与英特尔联合宣布了一项重大合作——推出基于英特尔Gaudi 3 AI加速器和Tiber AI C
    的头像 发表于 10-09 16:40 381次阅读

    如何选择AI即服务平台

    AI即服务(AIaaS)平台通过提供预构建的AI模型、开发工具、基础设施以及专业支持,帮助企业快速实现A
    的头像 发表于 10-08 10:40 131次阅读

    英特尔携手科技WAIC展现AI Infra

    PC版等。此外,主办的“新质生产力:AI Infra构筑企业新动能”主题论坛同时亮相上海世博中心,邀请了包括英特尔在内的多家业界大咖,展望AI
    的头像 发表于 08-16 15:02 463次阅读
    英特尔携手<b class='flag-5'>星</b><b class='flag-5'>环</b>科技WAIC展现<b class='flag-5'>AI</b> Infra

    言犀智能体平台上线了!赶紧来试试!连接大模型企业应用的“最后一公里”

    言犀智能体平台企业级一站式 AI 智能体搭建与发布平台。聚合大模型、知识库、插件、工作流等能力
    的头像 发表于 08-07 14:47 218次阅读

    微创软件推出AI模型应用平台WISE

    微创软件在“2024微创人工智能战略发布会”上,正式推出了企业级AI模型应用平台WISE。该平台以其独特的技术架构和卓越性能,为
    的头像 发表于 05-31 11:31 785次阅读

    生态系统即战略,是IBM将企业级AI技术带给行业客户的主力军

    ,这些C端应用只是暴露于海面的一角,深藏于海面之下的是体量庞大、影响更深、更广的企业级AI市场。根据麦肯锡的研究,整体上生成式AI每年可为全球企业创造高达4.4万亿美元的利润。 深耕
    的头像 发表于 05-17 09:56 328次阅读

    Snowflake推出面向企业AI的大语言模型

    Snowflake公司近日推出了企业级AI模型——Snowflake Arctic,这是一款大型语言模型(LLM),专为满足企业复杂工作负载
    的头像 发表于 05-07 10:03 445次阅读

    Snowflake推出企业级AI模型

    Snowflake公司近日重磅推出了一款名为Snowflake Arctic的企业级大型语言模型(LLM)。这款AI模型针对复杂的企业工作负
    的头像 发表于 05-06 14:38 385次阅读

    浪潮信息发布企业模型开发平台&quot;元脑企智&quot;EPAI,加速AI创新落地

    of AI),为企业AI模型落地应用提供高效、易用、安全的端到端开发平台,提供数据准备、
    的头像 发表于 04-18 21:21 428次阅读
    浪潮信息发布<b class='flag-5'>企业</b>大<b class='flag-5'>模型</b>开发<b class='flag-5'>平台</b>&quot;元脑企智&quot;EPAI,加速<b class='flag-5'>AI</b>创新<b class='flag-5'>落地</b>

    阿里云推出企业级模型RAG系统

    在国际AI大数据峰会上,阿里云重磅推出了企业级模型检索增强生成(RAG)解决方案。这一解决方案旨在为企业提供更强大、更智能的大模型应用工具
    的头像 发表于 02-05 09:54 1108次阅读

    驾驭创造的力量: 生成式 AI 时代的 MLOps 演进

    以下文章来源于谷歌云服务,作者 Google Cloud 驾驭创造的力量: 生成式 AI 时代的 MLOps 演进  MLOps 是一种将机器学习模型从实验室推向生产的系统方法,它能够
    的头像 发表于 12-21 18:05 319次阅读

    NVIDIA 通过企业级生成式 AI 微服务为聊天机器人、AI 助手和摘要工具带来商业智能

    AI 模型的框架和工具系列)的一项全新服务,通过企业级检索增强生成(RAG)功能,帮助组织加强其生成式 AI 应用。 作为一项语义检索微服务,NeMo Retriever 借助经
    的头像 发表于 11-29 21:05 588次阅读

    NVIDIA 通过企业级生成式 AI 微服务 为聊天机器人、AI 助手和摘要工具带来商业智能

    。   NVIDIA NeMo™ Retriever 是 NVIDIA NeMo(一个用于构建、自定义和部署生成式 AI 模型的框架和工具系列)的一项全新服务,通过企业级检索增强生成(RAG)功能,帮助组织加强其
    发表于 11-29 14:37 267次阅读
    NVIDIA 通过<b class='flag-5'>企业级</b>生成式 <b class='flag-5'>AI</b> 微服务 为聊天机器人、<b class='flag-5'>AI</b> 助手和摘要工具带来商业智能