0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

借助NVIDIA Omniverse Replicator功能加快AI培训

星星科技指导员 来源:NVIDIA 作者:NVIDIA 2022-10-11 14:54 次阅读

Omniverse Replicator 是一个构建在 NVIDIA Omniverse 平台上的高度可扩展框架,它支持物理精确的 3D 合成数据生成 ,以加快感知网络的训练和准确性。

Omniverse Replicator 现在可以通过 NVIDIA NGC 上托管的容器部署在 云端 中, SaaS 可供应用程序早期访问。 Replicator 工具和内容套件现在还包括一个新的 Replicator Insight 应用程序,用于增强对生成数据的查看和检查,以及新的 SimReady 内容和即插即用合成数据工作流指南。

许多合作伙伴正在其现有工具中集成 Omniverse Replicator ,以扩展其合成数据工作流。西门子凭借其 SynthAI 软件、 SmartCow 、 Mirage 和 Lightning AI 率先使用 Omniverse Replicator 加速高质量合成数据生成。

合成数据:从本地到云

对于希望云部署的灵活性和可扩展性的开发人员和企业, Omniverse Replicator 现在可以作为 AWS 上的容器部署使用。您可以成为 NGC 的成员,在 Amazon EC2 G5 实例上访问容器和自助部署,该实例采用 A10G Tensor Core GPU

poYBAGNFE0SAOp8nAADlNitjAL4195.png

图 1.AWS 云架构上的 Omniverse Replicator

增强的检查和查看

生成合成数据和改进人工智能模型是一个迭代过程,需要能够查看和分析沿途生成的数据集。由于数据不容易导航,注释也不容易检查,所以这个过程可能相当麻烦。

在 GTC 上,我们发布了 Omniverse Replicator Insight early access ,这是一个应用程序,可以让您高效直观地查看、检查和分析生成的带有一系列注释的数据集。 Replicator Insight 允许您逐帧浏览来自不同传感器的生成数据集,选择要查看的兴趣点,并检查特定对象的特定注释。

Omniverse-Replicator-Insight-user-interface.jpg

图 2. Omniverse Replicator Insight 的用户界面

在带有一系列注释的 Replicator Insight 上,查看、检查和分析生成的数据集是高效而直观的。它允许您逐帧浏览不同传感器生成的数据集。可以选择感兴趣的对象来查看和检查特定对象的注释。

Replicator Insight 让开发人员和研究人员朝着以数据为中心的人工智能培训迈出了一大步,将合成数据更无缝地集成到模型改进过程中。

新 SimReady 资产

Omniverse Replicator SimReady Universal Scene Description ( USD )资产可帮助您开始生成合成数据,以缩小模拟与现实之间的差距:

高保真 3D 资产可在像素级别启动合成数据生成。

上下文内容资产,有助于训练场景中数据的多样性、上下文和行为。

传送带、坡道和纸板箱只是 Omniverse Replicator 库中可用的 SimReady 资产的几个示例。

您可以通过 下载 Omniverse 访问第一批免费 SimReady 资产。有关新资产和其他资源的更多信息,请参阅 New Cloud Applications, SimReady Assets, and Tools for Omniverse Developers Announced at GTC 。

Replicator 正在运行

一些合作伙伴正在使用 Omniverse Replicator 来加速 AI 感知网络的培训和性能。它们的应用程序跨越端到端合成数据生成工作流的每个阶段。凭借 Omniverse Replicator 作为其应用程序的基础平台,这些合作伙伴正在帮助客户增强数据集并提高各种行业用例的 AI 模型的准确性。

Mirage 正在帮助 ML 工程师了解他们的数据集的薄弱环节,并集成修复这些薄弱环节的合成数据。 Replicator 是 Mirage 客户生成高保真数据以改进其 ML 模型的主干。

Lightning AI 允许您构建模型并使用或创建 Lightning Apps :功能强大的端到端机器学习系统,完全可定制。 Omniverse Replicator Lightning 应用程序允许您快速生成合成数据,以减少与收集和标记真实数据相关的成本和工作量。

Lightning-AI-user-interface-2.jpg

图 3.显示并行模型训练的 Lightning AI 用户界面

使用 Lightning AI ,研究人员和开发人员可以运行并行的 AutoML 作业,找到性能最佳的对象检测模型,并验证真实世界数据的性能,以生成合成数据。

SmartCow 利用 Omniverse Replicator 简单有效地生成具有变化的合成数据。通过 Replicator 添加这些变化使 SmartCow 能够轻松地不断提高模型准确性。 SmartCow 在迭代过程中使用 Replicator 从数据漂移检测中生成其他变化,并创建改进的模型。

Siemens 正与 NVIDIA 合作,将 Omniverse Replicator 高保真渲染功能和 SDK 引入 SynthAI 的云端。这将确保从产品设计和协作到合成数据生成和模型培训的简单、简化的工作流程,并以成功部署结束。

关于作者

Nyla Worker 是 NVIDIA 的解决方案架构师,专注于嵌入式设备的模拟和深入学习。她在机器人和自动车辆的深度学习边缘应用方面拥有丰富的经验,并为嵌入式设备开发了加速推理管道。

Bhumin Pathak 是 NVIDIA 合成数据生成 SDK (也称为 Replicator )的高级产品经理。他喜欢在计算机图形学、 3D 仿真和机器学习的交叉领域工作。在加入 NVIDIA 之前,他曾在迪士尼担任人工智能的应用研究员,并在思科和三星担任其他各种职务。

审核编辑:郭婷

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • NVIDIA
    +关注

    关注

    14

    文章

    4940

    浏览量

    102818
  • 人工智能
    +关注

    关注

    1791

    文章

    46872

    浏览量

    237598
收藏 人收藏

    评论

    相关推荐

    NVIDIA加速AI在日本各行各业的应用

    企业借助基于 NVIDIA AI Enterprise 与 Omniverse 工业 AI 构建的创新中心和服务加速
    的头像 发表于 11-19 15:45 157次阅读

    印度制造商使用NVIDIA AIOmniverse创建工厂数字孪生

    在印度举行的 NVIDIA AI Summit 上,多家头部咨询伙伴和工业制造商表示正使用 NVIDIA Omniverse 在虚拟环境中整合下一代工厂。
    的头像 发表于 10-27 09:49 292次阅读

    Foxconn利用NVIDIA AIOmniverse训练机器人

    全球最大电子制造商 Foxconn 正准备制造 NVIDIA 最复杂的产品之一,并开始使用 NVIDIA Omniverse 和 Isaac 平台驱动的数字孪生。
    的头像 发表于 10-10 09:40 357次阅读

    借助NVIDIA Metropolis微服务构建视觉AI应用

    伴随着视觉 AI 复杂性的增加,精简的部署解决方案已成为优化空间和流程的关键。NVIDIA 能够加快企业的开发速度,借助 NVIDIA Me
    的头像 发表于 09-09 09:46 277次阅读
    <b class='flag-5'>借助</b><b class='flag-5'>NVIDIA</b> Metropolis微服务构建视觉<b class='flag-5'>AI</b>应用

    借助OpenUSD和NVIDIA Omniverse开发数字孪生应用

    接口、软件开发套件和服务组成的,使开发者能够开发基于 OpenUSD 的应用 NVIDIA Omniverse开发了一款数字孪生应用。
    的头像 发表于 09-06 14:18 362次阅读

    NVIDIA发布Omniverse微服务,为物理AI提供超强助力

    NVIDIA Omniverse Cloud Sensor RTX生成用于加速自动驾驶汽车、机械臂、移动机器人、人形机器人和智能空间AI开发工作的合成数据   CVPR— NVIDIA
    发表于 06-18 16:35 497次阅读
    <b class='flag-5'>NVIDIA</b>发布<b class='flag-5'>Omniverse</b>微服务,为物理<b class='flag-5'>AI</b>提供超强助力

    电子制造商采用NVIDIA AIOmniverse助力工厂提高运营效率并降低成本

    。   NVIDIA 宣布,各大电子制造商正在使用 NVIDIA 的技术并借助新的参考工作流将其工厂改造成具有更高自主化水平的设施。该工作流结合了 NVIDIA Metropolis
    的头像 发表于 06-04 10:22 582次阅读

    使用OpenUSD和NVIDIA Omniverse开发虚拟工厂解决方案

    工业开发者正在借助 NVIDIA AINVIDIA Omniverse 和通用场景描述 (OpenUSD)生态系统的力量构建虚拟工厂解决方
    的头像 发表于 05-28 18:12 1247次阅读
    使用OpenUSD和<b class='flag-5'>NVIDIA</b> <b class='flag-5'>Omniverse</b>开发虚拟工厂解决方案

    Omniverse教程(12):NVIDIA Omniverse USD Presenter的基础应用

    如前所述,NVIDIA Omniverse™ 是一个参考开发平台,通过模块化的开发框架能够轻松扩展和自定义。
    的头像 发表于 05-20 10:09 635次阅读
    <b class='flag-5'>Omniverse</b>教程(12):<b class='flag-5'>NVIDIA</b> <b class='flag-5'>Omniverse</b> USD Presenter的基础应用

    NVIDIA Omniverse USD Composer能用来做什么?如何获取呢?

    NVIDIA Omniverse™ USD Composer(以前称为 Create)是 NVIDIA Omniverse™ 中用于构建虚拟世界的参考应用程序,允许用户进行组装、模拟和
    的头像 发表于 05-20 10:07 719次阅读
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Omniverse</b> USD Composer能用来做什么?如何获取呢?

    借助NVIDIA Omniverse加速汽车行业3D营销内容制作

    借助 NVIDIA Omniverse™ Enterprise,比特视界加快了制作周期、改善了与团队和客户的协作并降低了项目的总体成本。
    的头像 发表于 05-16 10:27 1023次阅读
    <b class='flag-5'>借助</b><b class='flag-5'>NVIDIA</b> <b class='flag-5'>Omniverse</b>加速汽车行业3D营销内容制作

    NVIDIA Omniverse中的物理模拟功能

    NVIDIA Omniverse™ Simulation 作为 NVIDIA Omniverse™ 平台的关键组件之一,由 NVIDIA
    的头像 发表于 03-08 11:30 989次阅读
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Omniverse</b>中的物理模拟<b class='flag-5'>功能</b>

    Omniverse Connectors功能及区别简析

    NVIDIA Omniverse™ Connect 允许您使用常用的应用程序作为 NVIDIA Omniverse™ 平台的内容交付工具。
    的头像 发表于 01-05 09:23 598次阅读
    <b class='flag-5'>Omniverse</b> Connectors<b class='flag-5'>功能</b>及区别简析

    NVIDIA 初创加速计划 Omniverse 加速营

    的重要力量。基于 NVIDIA 全栈式 AI 计算平台和 Omniverse TM 平台上的生成式 AI 创作实践,让企业、开发者能够了解可落地的生成式
    的头像 发表于 12-04 20:35 621次阅读
    <b class='flag-5'>NVIDIA</b> 初创加速计划 <b class='flag-5'>Omniverse</b> 加速营

    NVIDIA 知乎精彩问答甄选 | 查看关于 NVIDIA Omniverse 的相关精彩问答

    NVIDIA 带来知乎精彩问答甄选系列,将为您精选知乎上有关 NVIDIA 产品的精彩问答。 本期为问答甄选第十八期 ——  查看关于 NVIDIA Omniverse 的相关精彩问答
    的头像 发表于 12-01 18:40 450次阅读
    <b class='flag-5'>NVIDIA</b> 知乎精彩问答甄选 | 查看关于 <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Omniverse</b> 的相关精彩问答