0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

使用Fleet Command完成部署和管理AI应用程序

星星科技指导员 来源:NVIDIA 作者:Amanda Saunders 2022-04-07 14:40 次阅读

随着在边缘部署人工智能应用程序的增长, IT 组织正在寻找部署和管理其边缘计算系统和软件的最佳方式。

NVIDIA Fleet Command 通过将 NVIDIA-Certified Systems 转化为安全边缘设备,并在几分钟内将其连接到云,为任何规模的企业带来安全边缘 AI 。在云中,你可以从 NGC Catalog 或你的 NGC 私有注册中心部署和管理应用程序,通过无线方式更新系统软件,并通过浏览器和互联网连接远程管理系统。

为了帮助组织测试 Fleet Command 的好处,您可以使用 NVIDIA LaunchPad 测试产品。通过精心策划的实验室, LaunchPad 让你可以使用专用硬件和 Fleet Command 软件,这样你就可以在边缘地带完成部署和管理人工智能应用程序的整个过程。

在这篇文章中,我将带你参观 LaunchPad 上的 Fleet Command 试用版,包括申请者的详细信息、完成策划的实验室体验需要多长时间,以及接下来的步骤。

谁应该试试舰队司令部?

Fleet Command 是为负责管理多个边缘位置的人工智能应用程序的 IT 和 OT 专业人员设计的。该产品的简单性允许任何技能水平的专业人士轻松使用。

策展实验室将完成演示应用程序的部署。对于即将进行 edge 项目的用户,演示应用程序可用于测试 Fleet Command 的功能,但仍需在现场进行全面测试。

Fleet Command 实验室体验旨在部署和管理边缘的人工智能应用程序。 NVIDIA LaunchPad 提供了其他实验室,用于使用 NVIDIA Base Command 管理训练环境, NVIDIA 人工智能企业 用于从企业数据中心优化人工智能的开发和部署。

Fleet Command 策划的实验室包括什么?

在本次试验中,您充当车队指挥系统管理员,部署计算机视觉应用程序,用于在交叉口清点车辆。整个审判大约需要一个小时。

在 NGC 中访问舰队司令部

Fleet Command 可以通过 NGC 从任何地方访问,这是一个 GPU 优化的人工智能软件中心,允许管理员远程管理边缘位置、系统和应用程序。

管理员会自动将 Fleet Command 添加到 NGC 控制台。

创建边位置

Fleet Command 中的位置代表安装物理系统的真实位置。在实验室中,您可以创建一个边缘位置,但客户可以在生产中管理数千个位置。

要添加新位置,请选择 Add Location 并填写详细信息。选择可用的最新版本。

图 1 。添加一个由NVIDIA 车队司令部管理的位置

添加一个边缘系统

接下来,向位置添加一个系统,它代表边缘的物理系统。完成此步骤将生成一个代码,您可以使用该代码使用 Fleet Command 操作堆栈在现场安全地配置服务器。然后选择刚刚创建的位置并选择 Add System 。

图 2 。将边缘系统添加到位置

添加系统名称和说明以完成该过程。

将系统添加到某个位置后,您将获得一个生成的激活码,用于将舰队命令与现场的物理系统配对。

图 3 。生成激活码,将 Fleet Command 中的系统连接到边缘服务器

将 Fleet Command 连接到 LaunchPad 服务器

NVIDIA LaunchPad 提供了一个系统控制台,用于访问与试用相关的服务器。按照提示完成安装。初始设置后,系统会提示输入在 Fleet Command 中创建系统时生成的激活码。

图 4 。将边缘服务器与 Fleet Command配对

输入激活码后,系统将完成与车队命令的配对。 Fleet Command 用户界面中的复选框显示服务器正在运行并准备进行远程管理。

图 5 。边缘服务器的完整配对,现在可以通过 Fleet Command 进行控制

部署人工智能应用程序

现在,本地安装程序已将系统与 Fleet Command 配对,您可以部署 AI 应用程序。应用程序可以托管在 NGC 私有注册表上,也可以直接托管在 NGC 目录上。

图 6 。将来自 NGC 的应用程序添加到该位置

人工智能应用程序使用 Helm 图表进行部署, Helm 图表用于定义、安装和升级 Kubernetes 应用程序。选择 Add Application 并在提示中输入信息。

现在应用程序已在 Fleet Command 准备就绪,可以部署到一个或多个系统上。通过选择创建的位置和应用程序,创建部署,确保选中启用应用程序访问复选框。

图 7 。创建部署

现在,应用程序已部署在服务器上,您可以在试用应用程序中查看在示例视频数据上运行的应用程序。

图 8 。用于计算汽车数量的计算机视觉应用程序正在生产中

就这样。我现在已经向您介绍了连接到边缘物理系统、创建部署以及将 AI 应用程序推送到边缘服务器的端到端过程。在不到一个小时的时间里,试验从断开连接的远程系统发展到完全管理、安全的远程边缘环境。

下一步

Fleet Command 是一个强大的工具,可以在不影响安全性、灵活性或规模的情况下简化边缘计算基础设施的管理。

关于作者:

Amanda Saunders 在 NVIDIA 负责 Edge 和企业计算解决方案集团的 Edge AI 产品营销。她为医院、商店、仓库、工厂等带来了智能的边缘计算解决方案。除了从事 edge 解决方案之外, Amanda 还在 NVIDIA 担任销售和营销角色,与 AI 、数据科学、虚拟 GPU 和许多不同行业合作。

审核编辑:郭婷

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • NVIDIA
    +关注

    关注

    14

    文章

    4940

    浏览量

    102820
  • 人工智能
    +关注

    关注

    1791

    文章

    46872

    浏览量

    237613
  • 应用程序
    +关注

    关注

    37

    文章

    3243

    浏览量

    57608
收藏 人收藏

    评论

    相关推荐

    AI模型部署管理的关系

    AI模型的部署管理AI项目成功的两大支柱,它们之间既相互独立又紧密相连,共同推动着AI技术从实验室走向实际应用。
    的头像 发表于 11-21 10:02 85次阅读

    如何在STM32f4系列开发板上部署STM32Cube.AI

    已下载STM32Cube.AI扩展包,但是无法使用,感觉像是没有部署AI模型,我是想要通过摄像头拍照,上传图像后,经过开发板处理器进行AI模型处理识别过后,告诉我识别结果,显示在TFL
    发表于 11-18 09:39

    NVIDIA与德勤共同部署适用于医疗健康的数字AI智能体

    渥太华医院使用 NVIDIA AI 驱动的德勤 Frontline AI Teammate 来部署 AI 助手,以提供更好的患者体验并减轻管理
    的头像 发表于 11-13 11:37 296次阅读

    企业AI模型部署怎么做

    AI模型部署作为这一转型过程中的关键环节,其成功实施对于企业的长远发展至关重要。在此,AI部落小编为您介绍企业AI模型部署的步骤以及注意事项
    的头像 发表于 11-04 10:15 105次阅读

    Arm推出GitHub平台AI工具,简化开发者AI应用开发部署流程

    专为 GitHub Copilot 设计的 Arm 扩展程序,可加速从云到边缘侧基于 Arm 平台的开发。 Arm 原生运行器为部署云原生、Windows on Arm 以及云到边缘侧的 AI
    的头像 发表于 10-31 18:51 1240次阅读

    使用OpenVINO GenAI API在C++中构建AI应用程序

    许多桌面应用程序是使用 C++ 开发的,而将生成式AI(GenAI)功能集成到这些应用程序中可能会很具有挑战性,尤其是因为使用像 Hugging Face 这样的 Python 库的复杂性。C++
    的头像 发表于 10-12 09:36 310次阅读
    使用OpenVINO GenAI API在C++中构建<b class='flag-5'>AI</b><b class='flag-5'>应用程序</b>

    三行代码完成生成式AI部署

    OpenVINO2024.2版本跟之前版本最大的不同是OpenVINO2024.2分为两个安装包分别是基础包与生成式AI支持包,新发布的GenAI开发包支持C++与Python语言接口调用,支持多种
    的头像 发表于 08-30 16:49 382次阅读
    三行代码<b class='flag-5'>完成</b>生成式<b class='flag-5'>AI</b><b class='flag-5'>部署</b>

    使用Redis和Spring Ai构建rag应用程序

    随着AI技术的不断进步,开发者面临着如何有效利用现有工具和技术来加速开发过程的挑战。Redis与SpringAI的结合为Java开发者提供了一个强大的平台,以便快速构建并部署响应式AI应用。探索这一
    的头像 发表于 04-29 08:04 976次阅读
    使用Redis和Spring <b class='flag-5'>Ai</b>构建rag<b class='flag-5'>应用程序</b>

    使用Docker部署Go Web应用程序步骤

    大多数情况下Go应用程序被编译成单个二进制文件,web应用程序则会包括模版和配置文件。而当一个项目中有很多文件的时候,由于很多文件没有同步就会导致错误的发生并且产生很多的问题。
    发表于 04-20 09:33 475次阅读
    使用Docker<b class='flag-5'>部署</b>Go Web<b class='flag-5'>应用程序</b>步骤

    开发者手机 AI - 目标识别 demo

    应用的demo。 应用程序通过相机进行预览,对预览画面中的物体进行目标识别,目前该应用程序支持识别100种物体。 系统架构 下图为demo应用以及Openharmony AI子系统的架构图。 目标
    发表于 04-11 16:14

    NVIDIA数字人技术加速部署生成式AI驱动的游戏角色

    NVIDIA 在 GDC 2024 大会上宣布,Inworld AI 等领先的 AI 应用程序开发者,正在使用 NVIDIA 数字人技术加速部署生成式
    的头像 发表于 04-09 10:08 628次阅读
    NVIDIA数字人技术加速<b class='flag-5'>部署</b>生成式<b class='flag-5'>AI</b>驱动的游戏角色

    【从0开始创建AWTK应用程序】编译应用到RTOS平台

    AWStudio上编写好AWTK应用程序后,部署到RTOS平台(如STM32)是很方便的,下面就以STM32F429型号为例子来介绍如何编译AWTK应用到RTOS
    的头像 发表于 03-21 08:23 572次阅读
    【从0开始创建AWTK<b class='flag-5'>应用程序</b>】编译应用到RTOS平台

    应用程序中的服务器错误怎么解决?

    在使用应用程序时,可能会遇到服务器错误的问题。这种错误通常会导致应用程序无法正常运行 ,给用户带来不便。下面将介绍应用程序中的服务器错误及其解决方法,帮助您快速解决这一问题。
    的头像 发表于 03-12 15:13 5800次阅读

    谷歌发布新的AI SDK,简化Gemini模型与Android应用程序的集成

    对于 Android 应用程序,Google 提供了 Google AI Client SDK for Android,它将 Gemini REST API 封装为惯用的 Kotlin API
    的头像 发表于 01-03 16:29 908次阅读

    开发java应用程序的基本步骤是

    ava是一种面向对象的编程语言,广泛用于开发各种类型的应用程序。在开发Java应用程序时,有一些基本步骤需要遵循,以确保应用程序的正确性和可靠性。 1.确定需求:这是开发任何应用程序
    的头像 发表于 11-28 16:52 1527次阅读