0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

SIGGRAPH 2023 | NVIDIA 发布支持生成式 AI 与 OpenUSD 的重大 Omniverse 升级

NVIDIA英伟达 来源:未知 2023-08-09 19:10 次阅读

最新平台更新、Adobe Firefly 的接入、OpenUSD 向 RealityKit 的导入以及 Ada 架构系统将共同加速各种具有互操作性的 3D 工作流以及工业数字化进程。

洛杉矶 — SIGGRAPH — 太平洋时间 2023 年 8 月 8 日 —NVIDIA 发布 NVIDIA Omniverse 平台的重要版本更新,为开发者和工业企业提供全新的基础应用和服务,助力其使用 OpenUSD 框架和生成式 AI 来优化并强化其 3D 工作流程。

Omniverse 是一个 OpenUSD 原生软件平台,可进行跨 3D 工具和应用的连接、描述及模拟。此次更新将加快虚拟世界和高级工作流的创建速度,推动工业数字化进程。Cesium、Convai、Move AI、SideFX Houdini 和 Wonder Dynamics 现已通过 OpenUSD 接入 Omniverse。

此次平台更新主要升级了 Omniverse Kit(用于开发原生 OpenUSD 应用和扩展程序的引擎),以及 NVIDIA Omniverse Audio2Face 基础应用和空间计算功能。

NVIDIA Omniverse 与模拟技术副总裁 Rev Lebaredian 表示:“工业企业正在竞相推动工作流的数字化,这提升了对 OpenUSD 赋能、互联、可互操作的 3D 软件生态的需求。最新的 Omniverse 更新让开发者能够通过 OpenUSD,利用生成式 AI 来强化自身工具,并让企业能够构建更大、更复杂的世界级模拟,以此作为其工业应用的数字测试场。”

重要改进

Omniverse Kit 的更新包括:

  • 全新模块化应用构建:全新 Omniverse Kit Extension Registry 是一个用于访问、共享和管理 Omniverse 扩展程序的中央存储库,开发者可以轻松启用或关闭其应用中的功能,因此能够比以往更加轻松地利用 NVIDIA 提供的 600 多个核心 Omniverse 扩展程序来构建自定义应用。

  • 全新开发者模板和资源:全新应用和体验模板让刚开始使用 OpenUSD 和 Omniverse 的开发者只需要进行极少量的编码工作就能轻松上手。

  • 提升效率和用户体验:全新渲染优化功能充分利用 NVIDIA RTX GPU 中 NVIDIA Ada Lovelace 架构的各项改进,并将 DLSS 3 技术完全集成到 Omniverse RTX 渲染器中。全新 AI 降噪器可实现大型工业场景的实时 4K 路径追踪。

  • 由原生 RTX 驱动的空间集成:全新扩展现实(XR)开发者工具可让用户在基于 Omniverse 的应用中构建原生空间计算选项,使用户能够按照自己的想法灵活地体验 3D 项目和虚拟世界。

这些平台更新在 Omniverse 基础应用中得到了展现。Omniverse 基础应用是完全可定制的参考应用,创作者、企业和开发者可以对其进行复制、扩展或改进。升级的应用包括:

  • Omniverse USD Composer:让 3D 用户能够组装基于 OpenUSD 的大型场景。

  • Omniverse Audio2Face:提供对只需通过音频文件即可创建逼真面部动画和手势的生成式 AI 应用编程接口的访问。现在还添加了多语种支持和全新女性基础模型。

OpenUSD 扩展 Omniverse 生态

NVIDIA 还发布了一系列面向开发者和企业的框架、资源和服务,以此加速通用场景描述(即OpenUSD)的采用。

此外,NVIDIA 还宣布构建了全新的 Omniverse Cloud API,供开发人员更无缝地实现和部署 OpenUSD 工作流和应用程序。例如,ChatUSD 是一个供开发人员使用的大型语言模型(LLM) copilot 工具,可以回答 USD 知识问题或生成 Python-USD 代码脚本。

OpenUSD 支持的全新 Omniverse 连接器现已推出,为工业企业打破复杂生产流水线中的数据孤岛带来了更多的可能性。

Adobe 与 NVIDIA 宣布计划将 Adobe Firefly(Adobe 的创意生成式 AI 模型系列)作为 Omniverse 的 API 提供给开发者和创作者,助力其完善设计流程。此举扩大了双方在 Adobe Substance 3D、生成式 AI 和 OpenUSD 项目方面的合作。

Wonder Dynamics 已接入 Omniverse,通过其 AI 平台 Wonder Studio 提供全新 OpenUSD 导出支持。Wonder Studio AI 平台可自动对计算机生成的角色进行动画化、添加照明并合成到实时动作场景中。全新 OpenUSD 导出支持将使艺术家只需要使用单个摄像机拍摄的视频,就能生成并导出完整的 3D 场景。

Luma AI 以 USDZ 格式制作的现实捕捉模型可以随时导入到 Omniverse 中。虚拟形象公司 Convai 和角色引擎公司 Inworld AI 的工具也接入了 Omniverse。借助 Convai 等 AI 工具,创作者可以在数字孪生环境中添加角色,这些角色可以提供环境和物体的相关信息,也可以充当导游或虚拟机器人。Move AI 通过 Move One 应用实现了单摄像头动作捕捉,捕捉的图像可用于生成 3D 角色动画,然后将其导出到 OpenUSD 并在 Omniverse 中使用。

Omniverse 用户现在可以构建与其他基于 OpenUSD 的空间计算平台(如 ARKit 和 RealityKit)兼容的内容、体验和应用。此外,对 Khronos Group OpenXR 开放标准的全新支持将 Omniverse 的应用范围扩展到了 HTC VIVE、Magic Leap 和 Varjo 等制造商生产的更多头显。

SideFX Houdini 的用户现在还可以将 Houdini Digital Assets 直接加载到 Omniverse 视窗中,使基于 Houdini 的互联工作流衔接得更加无缝。Cesium 的 Omniverse 扩展程序 Cesium for Omniverse 支持 3D Tiles。3D Tiles 是一种在虚拟世界(包括 OpenUSD 支持的虚拟世界)中传输大规模地理空间数据集的开放标准。CGI.Backgrounds 现在可在 USD Composer 中使用多种超高清 HDRi 贴图。Cadence DataCenter Design Software 现可在 Omniverse 上使用,其可帮助用户在完整的数字孪生情境中查看计算流体动力学模拟。借助 Cadence 数据中心扩展程序,用户可以在实施前规划、测试并验证设计和运营方面的考虑因素。Blackshark.AI 世界数字孪生平台现已接入 Omniverse。

客户使用 Omniverse 实现数字化

多家客户正在使用 Omniverse 来完成从模拟机器人到训练 AI 模型和改进动画等各种任务。

波士顿动力人工智能研究所(Boston Dynamics AI Institute)正在使用 Omniverse 模拟机器人及其交互,以推动新型机器人和控制系统的设计工作。汽车和自主系统产业化领域的领先企业大陆集团正在其移动机器人业务中使用 Omniverse,以大规模地生成符合物理学的合成数据,用以训练计算机视觉 AI 模型和执行系统集成测试。

沃尔沃汽车已将其数字孪生转为 OpenUSD 格式,使用 Omniverse 创造出沉浸式可视化效果,帮助客户在线做出购买决策。

品牌设计及体验机构 Marks Design 正在使用 Omniverse 和 OpenUSD 来简化并提高协作的效率,同时改进其动画、可视化和渲染工作流。

全新 Omniverse 系统与合作伙伴

NVIDIA 正在与全球各地的系统制造商协作,致力于为数百万设计师、建筑师和工程师提供针对 Omniverse 优化配置的 RTX 工作站。这些新系统最多可搭载四颗 NVIDIA RTX 6000 Ada Generation GPU 并搭配 NVIDIA Omniverse Enterprise 软件,可加速 OpenUSD 世界的构建、生成式 AI 赋能的协同设计以及其他工业数字化应用。

Omniverse 用户还可以充分利用全新 NVIDIA L40S GPU 的性能。这款功能强大的通用数据中心 GPU 可加速图形密集型工作负载。

供应情况

最新 Omniverse 版本现已发布可免费下载的公测版,将于近期通过 Omniverse Enterprise 提供。

点击“阅读原文”,或扫描下方海报二维码,观看 NVIDIA 创始人兼 CEO 黄仁勋在 SIGGRAPH 现场发表的 NVIDIA 主题演讲回放了解 NVIDIA 的新技术,包括屡获殊荣的研究,OpenUSD 开发,以及最新的 AI 内容创作解决方案。


原文标题:SIGGRAPH 2023 | NVIDIA 发布支持生成式 AI 与 OpenUSD 的重大 Omniverse 升级

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英伟达
    +关注

    关注

    22

    文章

    3770

    浏览量

    90990

原文标题:SIGGRAPH 2023 | NVIDIA 发布支持生成式 AI 与 OpenUSD 的重大 Omniverse 升级

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    NVIDIA 推出高性价比的生成 AI 超级计算机

    Jetson Orin Nano Super 可将生成 AI 性能提升至1.7 倍,支持科技爱好者、开发者和学生使用的主流模型。     NVID
    发表于 12-18 17:01 298次阅读
    <b class='flag-5'>NVIDIA</b> 推出高性价比的<b class='flag-5'>生成</b><b class='flag-5'>式</b> <b class='flag-5'>AI</b> 超级计算机

    生成AI如何通过OpenUSD实现定制化营销内容

    “洞悉 Omniverse”系列文章将重点介绍艺术家、开发者和企业如何使用通用场景描述和 NVIDIA Omniverse 的最新技术改变其工作流程。
    的头像 发表于 12-06 13:39 144次阅读

    NVIDIA在加速计算和生成AI领域的创新

    在最新发布的公司 2024 财年可持续发展报告开篇的一封信中,NVIDIA 创始人兼首席执行官黄仁勋介绍了 NVIDIA 在加速计算和生成
    的头像 发表于 09-09 09:18 545次阅读

    借助OpenUSDNVIDIA Omniverse开发数字孪生应用

    接口、软件开发套件和服务组成的,使开发者能够开发基于 OpenUSD 的应用 NVIDIA Omniverse开发了一款数字孪生应用。
    的头像 发表于 09-06 14:18 388次阅读

    NVIDIA发布通用场景描述(OpenUSD)的重大成果

    领域的应用,提高开发者为 AI 新一轮发展构建高精度虚拟世界的能力。 通过基于OpenUSD的全新生成 AI,以及在
    的头像 发表于 07-31 10:38 641次阅读

    NVIDIA NIM:打造AI领域的AI-in-a-Box,提高AI开发与部署的高效性

    据7月30日官方发布的资讯显示,在全球备受瞩目的计算机图形学盛会——SIGGRAPH 2024上,NVIDIA公司对外展示了其在诸如渲染、仿真及生成
    的头像 发表于 07-30 16:27 661次阅读

    NVIDIA发布适用于OpenUSD语言、几何体、物理学和材质的生成AI模型与NIM微服务

    )的重大成果。这将扩大这一通用3D数据交换框架在机器人、工业设计和工程领域的应用,提高开发者为AI新一轮发展构建高精度虚拟世界的能力。   通过基于OpenUSD的全新生成
    发表于 07-30 09:20 169次阅读
    <b class='flag-5'>NVIDIA</b><b class='flag-5'>发布</b>适用于<b class='flag-5'>OpenUSD</b>语言、几何体、物理学和材质的<b class='flag-5'>生成</b><b class='flag-5'>式</b><b class='flag-5'>AI</b>模型与NIM微服务

    NVIDIA携手Meta推出AI服务,为企业提供生成AI服务

    NVIDIA近日宣布了一项重大举措,正式推出NVIDIA AI Foundry服务与NVIDIA NIM(
    的头像 发表于 07-25 16:57 532次阅读

    NVIDIA发布Omniverse微服务,为物理AI提供超强助力

    NVIDIA Omniverse Cloud Sensor RTX生成用于加速自动驾驶汽车、机械臂、移动机器人、人形机器人和智能空间AI开发工作的合成数据   CVPR—
    发表于 06-18 16:35 510次阅读
    <b class='flag-5'>NVIDIA</b><b class='flag-5'>发布</b><b class='flag-5'>Omniverse</b>微服务,为物理<b class='flag-5'>AI</b>提供超强助力

    NVIDIA Omniverse 将为全新 OpenPBR 材质模型提供原生支持

    、组合、模拟和协作的可扩展框架和生态系统,OpenUSD 使开发者能够构建可互操作的 3D 工作流,开启了工业数字化的新时代。 此外,NVIDIA Omniverse 还将为全新 OpenPBR 材质模型
    的头像 发表于 06-14 11:23 625次阅读
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Omniverse</b> 将为全新 OpenPBR 材质模型提供原生<b class='flag-5'>支持</b>

    使用OpenUSDNVIDIA Omniverse开发虚拟工厂解决方案

    工业开发者正在借助 NVIDIA AINVIDIA Omniverse 和通用场景描述 (OpenUSD)生态系统的力量构建虚拟工厂解决方
    的头像 发表于 05-28 18:12 1287次阅读
    使用<b class='flag-5'>OpenUSD</b>和<b class='flag-5'>NVIDIA</b> <b class='flag-5'>Omniverse</b>开发虚拟工厂解决方案

    基于NVIDIA Omniverse构建并由OpenUSD生成AI助力的产品配置器

    达索系统凭借其 3DEXCITE 解决方案成为行业领军企业之一,通过生成 AI 支持的交互性和叙事,推动产品的商业销售。
    的头像 发表于 04-24 10:20 321次阅读

    NVIDIA Edify多模态架构升级,引领视觉生成AI新纪元

    NVIDIA近日宣布,其用于视觉生成AI的多模态架构Edify迎来重大更新,为开发者和视觉内容提供商带来前所未有的新功能。其中,3D资产
    的头像 发表于 03-27 10:22 453次阅读

    NVIDIA Omniverse中的物理模拟功能

    NVIDIA Omniverse™ Simulation 作为 NVIDIA Omniverse™ 平台的关键组件之一,由 NVIDIA
    的头像 发表于 03-08 11:30 1059次阅读
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Omniverse</b>中的物理模拟功能

    NVIDIA Research 在 SIGGRAPH Asia 中展示如何使用生成 AI 进行交互纹理绘制

    在悉尼举行的 SIGGRAPH Asia Real-Time Live 活动中,NVIDIA 研究人员展示了集成在交互纹理绘制工作流中的生成
    的头像 发表于 12-26 18:05 597次阅读
    <b class='flag-5'>NVIDIA</b> Research 在 <b class='flag-5'>SIGGRAPH</b> Asia 中展示如何使用<b class='flag-5'>生成</b><b class='flag-5'>式</b> <b class='flag-5'>AI</b> 进行交互<b class='flag-5'>式</b>纹理绘制