0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

NVIDIA 凭借生成式 AI 和通用智能体方面的研究获得 NeurIPS 奖

NVIDIA英伟达 来源:未知 2022-12-01 22:40 次阅读

在 NeurIPS 这一关注机器学习计算机视觉等领域的业界知名会议上,NVIDIA Research 带来了 60 多个项目,并展示了开创性成果

两篇 NVIDIA Research 的论文凭借对 AI 和机器学习领域的贡献而荣获 2022 年 NeurIPS 奖。其中一篇研究的是基于扩散的生成式 AI 模型,另一篇则是关于如何训练通用智能体。

本周在新奥尔良举行的 NeurIPS 大会和下周的 NeurIPS 在线会议中,60 多场讲座、学术海报会和研讨会均有 NVIDIA 的论文作者参加。

针对图像、文本或视频等模态的合成数据生成(SDG)是贯穿 NVIDIA 论文的一大关键主题。其他主题还包括强化学习、数据采集和增强、气候模型以及联邦学习。

NVIDIA 学习和感知研究副总裁 Jan Kautz 表示:“AI 是一项极其重要的技术。从生成式 AI 到自主智能体,NVIDIA 在各个领域都取得了飞快的进展。在生成式 AI 领域,我们不仅在推动自身对基础模型理论的理解,而且还在为更轻松地创建逼真的虚拟世界和模拟做出实际的贡献。”

重构基于扩散的生成式模型的设计

基于扩散的模型已成为生成式 AI 领域的一项开创性技术。NVIDIA 研究人员凭借对扩散模型设计的分析获得了优秀主流论文奖(Outstanding Main Track Paper)。他们所提出的改进措施能够显著提高这些模型的效率和质量。

该论文将扩散模型的各个组成部分分解成模块,帮助开发者明确可以调整的流程,进而提高整个模型的性能。研究人员表示,经过他们修改的模型在 AI 生成图像质量评估中获得了创纪录的高分。

在基于《我的世界》游戏的模拟套件

中训练通用智能体

虽然研究人员长期以来一直在《星际争霸》、《Dota》、《围棋》等视频游戏环境中训练自主智能体,但这些智能体一般只擅长少数任务。因此,NVIDIA 研究人员开始转向全球最热门的游戏《我的世界》,开发了一个用于训练通用智能体(一种能够成功执行各种开放式任务的智能体)的可扩展训练框架。

这个名为 MineDojo 的框架使智能体能够利用一个由 7000 多个维基百科网页、数百万个 Reddit 帖子和 30 万小时游戏录像所组成的大规模在线数据库来学习《我的世界》的灵活玩法(如下图所示)。该项目获得了 NeurIPS 委员会颁发的优秀数据集和基准论文奖。

994e874c-7184-11ed-8abf-dac502259ad0.gif

作为概念验证,MineDojo 的研究人员创建了一个名为 MineCLIP 的大型基础模型。该模型学会了将 YouTube 上的《我的世界》游戏视频与视频字幕(包含玩家叙述屏幕上的动作)相关联。通过 MineCLIP,该团队训练出了一个能够在没有人类干预的情况下执行《我的世界》中若干任务的强化学习智能体。

创建构建虚拟世界的复杂 3D 几何体

本届 NeurIPS 上还展示了 GET3D。这个生成式 AI 模型可根据其所训练的建筑物、汽车、动物等 2D 图像类别,即时合成 3D 几何体。AI 生成的物体具有高保真的纹理和复杂的几何细节,并且以常用图形软件应用中所使用的三角网格格式创建,这使得用户可以十分轻松地将这些几何体导入 3D 渲染器和游戏引擎,以进行后续编辑。

9a087580-7184-11ed-8abf-dac502259ad0.gif

GET3D 即 Generate Explicit Textured 3D 的缩写,正如其名,它具备生成具有显示纹理的3D 网格的能力。该模型是在 NVIDIA A100 Tensor Core GPU 上使用从不同相机角度拍摄的约 100 万张 3D 几何体的 2D 图像训练而成。该模型在单颗 NVIDIA GPU 上运行推理时,每秒可生成约 20 个物体。

AI 生成的物体可用于构建为游戏、机器人、建筑、社交媒体等行业设计的数字空间,比如建筑物、户外空间或整座城市的 3D 表达。

通过对材质和光照的控制,改进可逆渲染流程

在 6 月于新奥尔良举行的最近一次 CVPR 会议上,NVIDIA Research 发布了 3D MoMa。这种可逆渲染方法使开发者能够创建由 3D 网格模型、覆盖在模型上的材质以及光照这三个不同部分所组成的 3D 物体。

此后,该团队在分离 3D 物体中的材质和光照方面取得了重大进展,这反过来又提高了 AI 生成几何体的可编辑能力,创造者们能够轻松地对在场景中移动的物体替换材质或者调整光照。

这项研究工作依靠的着色模型采用 NVIDIA RTX GPU 加速光线追踪技术,更为逼真。该成果正在 NeurIPS 大会上以海报形式展示。

提高语言模型生成文本的事实准确性

另一篇被 NeurIPS 收录的论文研究的是预训练语言模型的一项重大难题——AI 生成文本的事实准确性。

由于 AI 只是通过关联单词来预测句子接下来的内容,因此为生成开放式文本而训练的语言模型往往会产生包含非事实信息的文本。在这篇论文中,NVIDIA 研究人员提出了能够突破这一局限性的技术,这也是为现实世界应用部署此类模型的必要前提。

研究人员建立了首个能够衡量生成开放式文本语言模型事实准确性的自动化基准,并发现拥有数十亿参数的大型语言模型比小型语言模型的事实准确性更高。该研究团队提出了一项新的技术——事实性强化训练,以及一种新颖的采样算法,通过两者的结合,助力训练语言模型生成准确的文本,并且将事实性错误率从 33% 降低到 15% 左右。

目前,NVIDIA 在全球共有 300 多名研究人员,团队专注的课题领域涵盖 AI、计算机图形学、计算机视觉、自动驾驶汽车和机器人技术等。


原文标题:NVIDIA 凭借生成式 AI 和通用智能体方面的研究获得 NeurIPS 奖

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英伟达
    +关注

    关注

    22

    文章

    3707

    浏览量

    90597

原文标题:NVIDIA 凭借生成式 AI 和通用智能体方面的研究获得 NeurIPS 奖

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    NVIDIA AI助力SAP生成AI助手Joule加速发展

    在美国佛罗里达州奥兰多举行的 SAP Sapphire 大会上,NVIDIA 与这家企业软件公司公布了搭载NVIDIA AI Enterprise软件的生成
    的头像 发表于 09-09 09:37 345次阅读

    NVIDIA在加速计算和生成AI领域的创新

    在最新发布的公司 2024 财年可持续发展报告开篇的一封信中,NVIDIA 创始人兼首席执行官黄仁勋介绍了 NVIDIA 在加速计算和生成 AI
    的头像 发表于 09-09 09:18 455次阅读

    全新NVIDIA NIM微服务将生成AI引入数字环境

    生成物理 AI NIM 微服务以及 NVIDIA Metropolis 参考工作流旨在协助创建智能的沉浸
    的头像 发表于 08-02 15:20 469次阅读

    NVIDIA携手Meta推出AI服务,为企业提供生成AI服务

    NVIDIA近日宣布了一项重大举措,正式推出NVIDIA AI Foundry服务与NVIDIA NIM(NVIDIA Inference
    的头像 发表于 07-25 16:57 467次阅读

    HPE 携手 NVIDIA 推出 NVIDIA AI Computing by HPE,加速生成 AI 变革

    同发布“NVIDIA AI Computing by HPE”。 作为极具开创性的一站“交钥匙”私有云人工智能(private-cloud AI
    的头像 发表于 06-21 14:39 290次阅读

    NVIDIA推出NVIDIA AI Computing by HPE加速生成 AI 变革

    作为极具开创性的一站“交钥匙”私有云人工智能(private-cloud AI)解决方案,NVIDIA AI Computing by H
    的头像 发表于 06-20 17:36 654次阅读

    NVIDIA宣布全面推出 NVIDIA ACE 生成 AI 微服务

    采用 NVIDIA 宣布全面推出 NVIDIA ACE 生成 AI 微服务,以加速新一代数字人的发展,并将在平台上推出全新的
    的头像 发表于 06-04 10:18 586次阅读

    Nullmax旗下智能驾驶方案MaxDrive凭借面的行泊一优势获奖

    4月26日上午,由中国国际贸促会汽车行业委员会指导、汽车观察主办的「智輅•2024 中国汽车智能创新技术评选」在北京车展现场公布最终获奖名单,Nullmax旗下平台型智能驾驶方案MaxDrive
    的头像 发表于 04-28 14:24 422次阅读
    Nullmax旗下<b class='flag-5'>智能</b>驾驶方案MaxDrive<b class='flag-5'>凭借</b>全<b class='flag-5'>面的</b>行泊一<b class='flag-5'>体</b>优势获奖

    NVIDIA在加速识因智能AI大模型落地应用方面的重要作用介绍

    本案例介绍了 NVIDIA 在加速识因智能 AI 大模型落地应用方面的重要作用。生成大模型已广
    的头像 发表于 03-29 15:28 550次阅读

    NVIDIA生成AI研究实现在1秒内生成3D形状

    NVIDIA 研究人员使 LATTE3D (一款最新文本转 3D 生成 AI 模型)实现双倍加速。
    的头像 发表于 03-27 10:28 443次阅读
    <b class='flag-5'>NVIDIA</b><b class='flag-5'>生成</b><b class='flag-5'>式</b><b class='flag-5'>AI</b><b class='flag-5'>研究</b>实现在1秒内<b class='flag-5'>生成</b>3D形状

    NVIDIA生成AI开启药物研发与设计的新纪元

    NVIDIA BioNeMo 现已提供十余个生成 AI 模型以及云服务,正在推动计算机辅助药物发现生态系统的发展。
    的头像 发表于 01-10 16:00 485次阅读
    <b class='flag-5'>NVIDIA</b><b class='flag-5'>生成</b><b class='flag-5'>式</b><b class='flag-5'>AI</b>开启药物研发与设计的新纪元

    生成AI通过NVIDIA Isaac平台提高机器人的智能化水平

    今日,NVIDIA 机器人和边缘计算副总裁 Deepu Talla 在 CES 上的特别演讲中,详细介绍了 NVIDIA 及合作伙伴是如何将生成
    的头像 发表于 01-09 10:27 1060次阅读
    <b class='flag-5'>生成</b><b class='flag-5'>式</b><b class='flag-5'>AI</b>通过<b class='flag-5'>NVIDIA</b> Isaac平台提高机器人的<b class='flag-5'>智能</b>化水平

    Dropbox 与 NVIDIA 携手为数百万客户带来个性化的生成 AI

    NVIDIA 于 17 日宣布开展合作。双方将借助 AI 的力量为数百万 Dropbox 客户增强其知识工作,并提高生产力。 此次合作将通过新的个性化生成
    的头像 发表于 11-20 20:55 503次阅读
    Dropbox 与 <b class='flag-5'>NVIDIA</b> 携手为数百万客户带来个性化的<b class='flag-5'>生成</b><b class='flag-5'>式</b> <b class='flag-5'>AI</b>

    利用 NVIDIA Jetson 实现生成 AI

    近日,NVIDIA 发布了 Jetson 生成 AI 实验室(Jetson Generative AI Lab),使开发者能够通过
    的头像 发表于 11-07 21:25 878次阅读
    利用 <b class='flag-5'>NVIDIA</b> Jetson 实现<b class='flag-5'>生成</b><b class='flag-5'>式</b> <b class='flag-5'>AI</b>

    下一代神经网络:NVIDIA Research 在 NeurIPS 大会上发布一系列 AI 技术进步

    NVIDIA 研究人员正在与世界各地的学术机构合作,推进生成 AI、机器人和自然科学领域的进步。在全球顶级
    的头像 发表于 11-03 19:15 581次阅读
    下一代神经网络:<b class='flag-5'>NVIDIA</b> Research 在 <b class='flag-5'>NeurIPS</b> 大会上发布一系列 <b class='flag-5'>AI</b> 技术进步