0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

如何使用NVIDIA Edify创建出细节考究的 3D 沙漠景观

NVIDIA英伟达 来源:NVIDIA英伟达 2024-08-02 16:00 次阅读

NVIDIA 研究人员在当地时间本周二 SIGGRAPH 的 Real-Time Live 活动中,现场演示了如何使用NVIDIA Edify(一种适用于视觉生成式 AI 的多模态架构)在几分钟内即可创建出一个细节考究的 3D 沙漠景观。

作为本届 SIGGRAPH 图形大会备受瞩目的会议之一,NVIDIA 研究人员展示了他们在 AI 智能体的支持下,仅用五分钟不到的时间,就能够从头开始创建和编辑出沙漠景观。现场 demo 充分展现了生成式 AI 如何通过加快构思速度和生成原本需要从资源库中获取的自定义辅助资产,以成为艺术家的得力助手。

通过大幅缩短构思时间,这些 AI 技术将提高 3D 艺术家的生产力和创造力,为他们提供更快探索概念和加快部分工作流所需的工具。例如,他们可以在几分钟内生成场景所需的背景资产或 360 HDRi 环境,再也不需要在寻找或创建它们这件事上花费数小时了。

创意变成 3D 场景只需三分钟

创建一个完整的 3D 场景是一项复杂且耗时的任务。为了创建出一个丰富的场景,艺术家必须使用大量背景物体衬托他们的主要素材,然后还要找到合适的背景和环境贴图来模拟光照效果。由于时间有限,他们往往不得不在快速产出结果和探索各种创意之间做出权衡。

在 AI 智能体的支持下,创意团队就能“两者兼得”——既能快速将概念转化为现实,又能通过不断迭代获得合适的外观。

在这场 Real-Time Live 活动的 demo 演示中,研究人员使用文本提示指导 NVIDIA Edify 驱动的模型,来生成数十种 3D 资源,包括仙人掌、岩石、公牛头骨等,而且只需要几秒钟就能生成预览。

接下来,他们还指示智能体利用其他模型创建可能需要使用的背景和物体如何放置在场景中的布局,并且通过快速将岩石转换成金块展示了智能体如何适应创意指示最后一刻的变化。

在有了设计方案之后,他们利用智能体创建全质量资源,并在NVIDIA Omniverse USD Composer(一个用于创建虚拟世界的应用程序)中将场景渲染成逼真的图像。

NVIDIA Edify 加速环境生成

NVIDIA Edify 模型可以在帮助创作者专注于主要素材的同时,使用 AI 驱动的场景生成工具加速背景环境和物体的创建。该 Real-Time Live 活动的 demo 演示了两个 Edify 模型:

Edify 3D可根据文本或图像提示生成可直接编辑的 3D 网格。该模型只需要几秒钟就能生成预览,包括各个物体的旋转动画。这将帮助创作者在确定具体设计之前快速创建出原型。

Edify 360 HDRi可根据文本或图像提示生成最高分辨率为16K 的自然景观高动态范围图像(HDRi),这些图像可以用作背景和为场景模拟光照效果。

在 demo 过程中,研究人员还展示了一个由大语言模型驱动的 AI 智能体,以及一个使用 3D 工作流平台 OpenUSD 生成场景布局的 AI 模型 USD Layout。

NVIDIA 还在 SIGGRAPH 上宣布,两家领先的创意内容公司正在为设计师和艺术家提供一种通过生成式 AI 大幅提升生产力的新方法——使用 NVIDIA Edify 驱动的工具。

Shutterstock 推出了其 3D 生成服务的商业测试版。通过该服务,创作者可根据文本或图像提示快速创建原型并生成 3D 资产。该公司基于 Edify 的 360 HDRi 生成器也已进入早期体验阶段。

Getty Images 使用最新版本的 NVIDIA Edify 更新了其 Generative AI by Getty Images 服务,不但使用户创建图像的速度加快了一倍,而且还提高了输出质量和提示依从性,并支持高级控制和微调。

充分利用通用场景描述

使用 Edify 模型生成的 3D 物体、环境贴图和布局均采用 USD 这一用于描述和组成 3D 世界的标准格式。凭借这一兼容性,艺术家能够直接将 Edify 驱动的创作导入 Omniverse USD Composer。

在 Composer 中,他们可以使用流行的数字内容创建工具进一步修改场景,例如改变物体的位置、修改物体的外观、调整光照效果模拟等。

审核编辑:彭菁

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 3D
    3D
    +关注

    关注

    9

    文章

    2847

    浏览量

    107236
  • NVIDIA
    +关注

    关注

    14

    文章

    4838

    浏览量

    102683
  • AI
    AI
    +关注

    关注

    87

    文章

    29611

    浏览量

    267905
  • 模型
    +关注

    关注

    1

    文章

    3097

    浏览量

    48624

原文标题:SIGGRAPH 2024 | NVIDIA 研究人员利用实时生成式 AI 创建身临其境的沙漠世界

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    使用NVIDIA Edify助力的服务创建3D资产和虚拟环境照明

    使用 NVIDIA Edify 助力的服务创建 3D 资产和虚拟环境照明,或是减半生成图像时间。
    的头像 发表于 08-02 15:22 385次阅读

    欢创播报 腾讯元宝首发3D生成应用

    App。 腾讯元宝APP发布时,就围绕工作效率场景、日常生活等场景提供了丰富的应用,并有创建个人智能体等个性化体验,“3D角色梦工厂”则将大模型生成技术和3D应用结合,进一步创新了元宝的独特玩法。通过“
    的头像 发表于 07-18 11:39 678次阅读
    欢创播报 腾讯元宝首发<b class='flag-5'>3D</b>生成应用

    3D建模的重要内容和应用

    3D建模是一种技术,通过计算机软件创建虚拟三维模型,模拟现实世界中的物体或场景。这项技术广泛应用于建筑设计、电影制作、游戏开发、工程仿真等领域。下面古河云科技将介绍一些与3D建模相关的重要内容
    的头像 发表于 06-21 14:48 508次阅读

    嵌入式展演讲 | 《如何实现以300公里/小时的速度创建3D城市地图?》

    演讲时间2024年6月12日1545演讲地点上海世博展览馆3号馆C270演讲主题如何实现以300公里/小时的速度创建3D城市地图?什么是3D城市地图?它是如何
    的头像 发表于 06-05 08:09 232次阅读
    嵌入式展演讲 | 《如何实现以300公里/小时的速度<b class='flag-5'>创建</b><b class='flag-5'>3D</b>城市地图?》

    3D建模的特点和优势都有哪些?

    3D建模是一种用于创建三维对象的过程,它在许多领域都有着广泛的应用,包括动画、游戏开发、建筑设计、工程以及制造业等。下面古河云科技将介绍一些关于3D建模的内容详情,包括它的特点、优势以及一些常见
    的头像 发表于 05-13 16:41 2143次阅读

    NVIDIA生成式AI研究实现在1秒内生成3D形状

    NVIDIA 研究人员使 LATTE3D (一款最新文本转 3D 生成式 AI 模型)实现双倍加速。
    的头像 发表于 03-27 10:28 443次阅读
    <b class='flag-5'>NVIDIA</b>生成式AI研究实现在1秒内生成<b class='flag-5'>3D</b>形状

    NVIDIA Edify多模态架构升级,引领视觉生成式AI新纪元

    NVIDIA近日宣布,其用于视觉生成式AI的多模态架构Edify迎来重大更新,为开发者和视觉内容提供商带来前所未有的新功能。其中,3D资产生成功能的引入,极大地提升了AI图像生成的创意自由度,让创作者能够以前所未有的方式展现他们
    的头像 发表于 03-27 10:22 380次阅读

    NVIDIA Edify为视觉内容提供商带来3D生成式AI和全新图像控件

    用于视觉生成式 AI 的多模态架构 NVIDIA Edify 正在迈入全新维度。
    的头像 发表于 03-26 09:49 636次阅读

    奥比中光3D相机及方案亮相,携手NVIDIA探索机器人应用革新

    3月18日-21日,奥比中光作为英伟达NPN合作伙伴亮相NVIDIA GTC 2024 AI开发者大会,在美国加州圣何塞会议中心带来基于奥比中光3D相机与NVIDIA平台开发的多个演示
    的头像 发表于 03-22 09:37 308次阅读

    Stability AI推出Stable Video 3D模型,可制作多视角3D视频

    SV3D_u是Stable Video 3D的一个版本,仅需单幅图片即可生成运动轨迹视频,无须进行相机调整。扩充版本的SV3D_p加入了轨道视图的特性,使其可以根据预设的相机路径创建
    的头像 发表于 03-21 14:57 909次阅读

    奥比中光3D相机及方案亮相,携手NVIDIA探索机器人应用革新

    3月18日-22日,奥比中光作为英伟达NPN合作伙伴亮相NVIDIA GTC 2024 AI开发者大会,在美国加州圣何塞会议中心带来基于奥比中光3D相机与NVIDIA平台开发的多个演示
    的头像 发表于 03-19 17:20 613次阅读

    提供3D打印材料与解决方案,助力3D打印产业发展

    提供3D打印材料与解决方案,助力3D打印产业发展
    的头像 发表于 12-12 11:12 486次阅读

    3D 封装与 3D 集成有何区别?

    3D 封装与 3D 集成有何区别?
    的头像 发表于 12-05 15:19 935次阅读
    <b class='flag-5'>3D</b> 封装与 <b class='flag-5'>3D</b> 集成有何区别?

    阿迪达斯与 Covision Media 使用 AI 和 NVIDIA RTX 创建逼真的 3D 内容

    Covision Media 正在使用 AI 和 NVIDIA RTX 改进 3D 扫描流程和 3D 内容创建。 Covis
    的头像 发表于 11-28 18:45 594次阅读
    阿迪达斯与 Covision Media 使用 AI 和 <b class='flag-5'>NVIDIA</b> RTX <b class='flag-5'>创建</b>逼真的 <b class='flag-5'>3D</b> 内容

    当芯片变身 3D系统,3D异构集成面临哪些挑战

    当芯片变身 3D 系统,3D 异构集成面临哪些挑战
    的头像 发表于 11-24 17:51 731次阅读
    当芯片变身 <b class='flag-5'>3D</b>系统,<b class='flag-5'>3D</b>异构集成面临哪些挑战