0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

紧跟AI步伐, Gitee已支持AI模型托管

OSC开源社区 来源:OSC开源社区 2023-04-27 14:36 次阅读

AI 时代已经来了!

现在,越来越多的企业和个人开始使用 AI 技术来解决各种问题。想要了解 AI,那么就一定要了解 AI 模型,作为 AI 的核心技术之一,AI 模型为各种进阶的人工智能应用奠定了基础,从 ChatGPT 、文心一言、通义千问这种语言模型,到 Stable Diffusion、Midjourney 这种文本到图像生成模型,很难不让开发者们开始对 AI 模型的开发产生关注。

目前已经有许多开源的 AI 模型供开发者们学习,但开发者们接触后才发现,AI 模型大多体积庞大,对其进行版本控制和共享下载都十分困难。比如 stable-diffusion-v1-5 模型总共要占用近 24GB 的空间,清华大学开源的 ChatGLM-6B 也需要超过 13GB 的空间,如此巨大的空间占用,对于个人开发者来说是一个巨大的挑战。

AI 模型也能用 Gitee 托管

为了帮助开发者们更高效的学习和开发 AI 模型,Gitee 现已经支持了 AI 模型托管功能,为广大 AI 开发者提供高速稳定的托管服务,现在除了代码之外,你也可以在 Gitee 托管自己的 AI 模型了。

查看 AI 模型

AI 模型的管理界面和代码的管理界面风格统一,比较明显的区别在于在大文件(如 AI 模型文件)后会对其进行 LFS 文件的标注,并注明其所占空间大小,这样就能很方便地定位到 AI 模型文件。

d145d54c-e4c0-11ed-ab56-dac502259ad0.png

下载 AI 模型

  • 通过网页下载如果你想要下载仓库中的某个 AI 模型,就像下载代码仓库中的某个文件一样,点击其文件名并点击下载即可。
d14fdbfa-e4c0-11ed-ab56-dac502259ad0.png
  • 通过命令行下载除网页外,你也可以通过命令行下载模型文件:
#克隆仓库
gitclonehttps://gitee.com/
cd

#若已全局启动lfs,AI模型已全部自动下载完成
#若未全局启动lfs,可手动下载指定模型
gitlfsinstall

#执行完成后,的模型文件就可以直接使用了
gitlfspull-I

通过 Git LFS 管理模型

你还可以使用 Git LFS 的方式对模型进行管理。在仓库标签页中的「管理」进入「Git LFS」选项,就可以查看该仓库内所有的 LFS 文件,包含其文件类型、大小等信息,并可以对它们进行下载和删除的操作。

d158821e-e4c0-11ed-ab56-dac502259ad0.png

怎么把 AI 模型上传到 Gitee

那么,如果想在 Gitee 上托管 AI 模型该如何操作呢?流程和代码托管一样吗?

与代码托管类似,目前 Gitee 支持从 Hugging Face 导入和从本地推送两种方式进行 AI 模型的上传

从 Hugging Face 导入

Hugging Face 是一家非常活跃的人工智能创业公司。它拥有一个活跃的人工智能社区。有超过5000多家机构都在 Hugging Face 的社区发布内容,包括 Google AI、Facebook AI、微软等,这也让它成为了目前开发者们最熟悉的人工智能技术社区。

现在你可以直接使用 Hugging Face 的模型地址来将其导入至 Gitee 中,其操作与代码仓库的导入是相同的:

  • 点击右上角头像旁的「+」,选择从外部仓库导入;
  • 在 Git 仓库 URL 中输入你想要导入的 Hugging Face 地址,Gitee 会为其自动设置名称及路径;
  • 点击「导入」,等待几分钟即可完成,同时后台开始同步 LFS 文件(速度取决于文件大小)。
d1639e6a-e4c0-11ed-ab56-dac502259ad0.gif

从本地推送

除了从 Hugging Face 导入外,由于 Gitee 全面支持 Git LFS 功能,所以 Gitee 同样支持从本地推送 AI 模型,其流程与代码推送略有不同的是,推送 AI 模型时需要加入git lfs相关命令。

  • 推送 Hugging Face 的模型仓库
#克隆仓库至本地
gitclonehttps://huggingface.co/bert-base-uncased.git
cdbert-base-uncased

#同步模型数据
gitlfsfetch--all

#推送到Gitee仓库
gitlfspushhttps://gitee.com/--all
  • 推送自己的 AI 模型仓库
cdai-models-project

#初始化仓库
gitinit

#添加remote
gitremoteaddoriginhttps://gitee.com/

//...
//创建ai模型,如:xxx.msgpack
//...

#追踪模型文件
gitlfstrack"*.msgpack"
#提交追踪变更
gitadd.gitattributes
gitcommit-m"track*.msgpack"

#提交模型
gitadd.
gitcommit-m"append...."

#推送模型
gitlfspushorigin--all
gitpush

想要获得更大的存储空间?

目前该功能已经对所有付费企业开放,由于 AI 模型体积庞大,存储和流量成本较高,付费企业可以通过扩容 LFS 容量以存储更多的 AI 模型,在企业控制台中,点击左下角的设置即可查看 Git LFS 配额使用情况,并可按需进行扩容操作。

d172c9ee-e4c0-11ed-ab56-dac502259ad0.png

如果你想要获取更多关于 LFS 扩容的信息,欢迎扫描下方二维码联系专属顾问,或前往 Gitee 企业版官网了解更多详情:https://gitee.com/enterprises。

AI 时代已来,Gitee 已经做好准备帮助你搭上这趟快车,快来和我们同行吧!


审核编辑 :李倩


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    87

    文章

    30172

    浏览量

    268433
  • 模型
    +关注

    关注

    1

    文章

    3174

    浏览量

    48718
  • 代码
    +关注

    关注

    30

    文章

    4751

    浏览量

    68358

原文标题:紧跟AI步伐, Gitee已支持AI模型托管

文章出处:【微信号:OSC开源社区,微信公众号:OSC开源社区】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    使用cube-AI分析模型时报错的原因有哪些?

    使用cube-AI分析模型时报错,该模型是pytorch的cnn转化成onnx ``` Neural Network Tools for STM32AI v1.7.0 (STM.
    发表于 03-14 07:09

    STM CUBE AI错误导入onnx模型报错的原因?

    使用cube-AI分析模型时报错,该模型是pytorch的cnn转化成onnx ``` Neural Network Tools for STM32AI v1.7.0 (STM.
    发表于 05-27 07:15

    AI模型可以设计电路吗?

    AI模型
    电子发烧友网官方
    发布于 :2024年01月02日 15:09:29

    AI模型会不会取代电子工程师?

    AI模型
    电子发烧友网官方
    发布于 :2024年01月02日 15:11:43

    AI模型怎么解决芯片过剩?

    AI模型
    电子发烧友网官方
    发布于 :2024年01月02日 15:42:05

    AI模型可以取代大学教育吗?

    AI模型
    电子发烧友网官方
    发布于 :2024年01月02日 16:27:52

    AI学习】第 1 篇--活用创新模板学 AI

    创造新模版,也支持不熟悉编程者,善用模版来创造形形色色的 AI 模型。所以,不一定需要写程序,不一定需要高深数学,大家都可以利用模板来创作 AI 智能
    发表于 11-02 10:38

    AI概论:来来来,成为AI的良师益友》高焕堂老师带你学AI

    积极创造新模版,也支持不熟悉编程者,善用模版来创造形形色色的 AI 模型。5.【AI学习】第2篇--AI 的基础知识简介:人工智能(Arti
    发表于 11-05 17:55

    介绍在STM32cubeIDE上部署AI模型的系列教程

    介绍在STM32cubeIDE上部署AI模型的系列教程,开发板型号STM32H747I-disco,值得一看。MCUAI原文链接:【嵌入式AI开发】篇四|部署篇:STM32cubeIDE上部署神经网络之
    发表于 12-14 09:05

    AI算法中比较常用的模型都有什么?

    AI算法中比较常用的模型都有什么
    发表于 08-27 09:19

    带你玩转OpenHarmony AI-基于海思NNIE的AI能力自定义

    自动检测、识别和判断的新体验,对于OpenHarmony平台上的AI开发有了一定认识。如果你已经有了一个AI创意,怎样训练出相关模型?怎样在你的OpenHarmony设备上部署你的AI
    发表于 01-12 11:39

    ST MCU边缘AI开发者云 - STM32Cube.AI

    架构,以便我们可以更快地收敛AI应用程序的开发。总体而言,我们对ST AI团队为我们提供的服务和支持非常满意,“斑马技术公司研发杰出成员Toly Kotlarsky说。“STM32板上的模型
    发表于 02-02 09:52

    【KV260视觉入门套件试用体验】Vitis AI 构建开发环境,并使用inspector检查模型

    支持。需要做的不只是执行几条命令,还需要了解赛灵思硬件平台的特点,选择合适的模型和框架,使用 Vitis AI 提供的工具和库进行优化和编译,最后在目标设备上运行您的 AI 应用。这个
    发表于 10-14 15:34

    紧跟AI步伐 海信扛起智能电视大旗

    在大尺度高端市场,海信则力推激光电视,紧跟AI时代步伐,海信能否扛起智能电视这杆大旗?海信表示坚定不移地走高端化之路。其推出的ULED、大尺寸、激光电视等产品,直接推动高端市场的发展。
    发表于 01-04 18:53 892次阅读

    AI模型托管原理分析

    AI模型托管是指将训练好的AI模型部署在云端或边缘服务器上,由第三方平台提供模型运行、管理和优化
    的头像 发表于 11-07 09:33 114次阅读