0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

英伟达再出AI黑科技,通过生成模型渲染3D环境

张康康 2018-12-21 14:17 次阅读

近日,在蒙特利尔举行的神经信息处理系统大会(NeurIPS)上,英伟达在一篇题为“视频到视频合成(“Video-to-Video Synthesis” )”的技术论文中阐述了其最新AI成果。


据透露,英伟达最新研发的这项成果,是可以渲染合成交互式3D环境的AI技术。在创建逼真的3D环境时,英伟达研发团队不再使用传统的图形技术,而是使用神经网络 ,特别是“生成模型”,通过来自如YouTube等来源的真实视频,进行模型训练,最终构建逼真的3D虚拟世界。

英伟达研发团队之所以使用“生成模型”来提高输出的准确性,是由于这种模型要求机器必须有效地内化数据的本质,它也因此被广泛认为是促进机器“理解”大量数据之间关系的最有前途的方法之一。


但是,像所有神经网络一样,使用这个模型也需要训练数据。幸运的是,英伟达研发团队将AI模型应用于街景,通过自动驾驶项目采集到的大量视频数据,确保了其关于城市街道上行驶车辆的训练镜头,再以分段网络识别不同的对象类别,如地面,树木,汽车,天空,建筑物等,开发算法以了解每个对象与其他对象的关系,最终,这些模型创建了城市环境的基本拓扑结构,然后AI再从基于从训练数据中学到的东西,模拟世界外观,包括照明,材料和动态等,由此生成几乎是还原性的高逼真3D环境。


“由于场景是完全合成生成的,因此可以轻松编辑以删除,修改或添加对象”英伟达表示。

在论文中,英伟达研发团队得出的结论是:“我们提出了一种基于条件生成对抗网络(GAN)的通用视频到视频合成框架:通过精心设计的发生器、鉴别器网络以及时空对抗物镜,我们可以合成高分辨率、照片级真实、时间一致的视频,大量实验表明,我们的结果明显优于最先进方法的结果。”

不得不承认,迄今为止,AI已经是人类最强有力的创新“加速器”,它让人类的能力得以延展,并逐渐变得更加强大。我们都能看到,在全世界范围内,数以万计的科学家们都在为AI技术的前沿突破做出努力,除了英伟达之外,不论是像Google、Facebook这样的海外巨头,还是类似国内旷视科技、极链科技这样的AI科技公司,都致力于全力研发产出能像人一样思考的AI技术。今天,旷视科技已经实现AI识别人脸对象中的各种特征,极链科技已经实现AI理解海量视频的场景表达,而未来,AI必然不仅是会让机器“知其然”,还要做到让它“知其所以然”,以最终实现推动整个AI进入“深度智能”的伟大愿景。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    87

    文章

    30805

    浏览量

    268934
收藏 人收藏

    评论

    相关推荐

    英伟AI加速器新蓝图:集成硅光子I/O,3D垂直堆叠 DRAM 内存

    加速器设计的愿景。 英伟认为未来整个 AI 加速器复合体将位于大面积先进封装基板之上,采用垂直供电,集成硅光子 I/O 器件,GPU 采用多模块设计,3D 垂直堆叠 DRAM 内存
    的头像 发表于 12-13 11:37 174次阅读
    <b class='flag-5'>英伟</b><b class='flag-5'>达</b><b class='flag-5'>AI</b>加速器新蓝图:集成硅光子I/O,<b class='flag-5'>3D</b>垂直堆叠 DRAM 内存

    鸿海与英伟携手打造下世代AI工厂

    鸿海科技集团与英伟携手合作,共同推进下世代AI工厂的建设。这一合作在去年的鸿海科技日上首次公开亮相,展示了双方在新竹厂房中利用英伟Omn
    的头像 发表于 11-19 16:14 237次阅读

    英伟Cosmos AI项目曝光:构建先进视频模型

    于一体的先进视频模型,这一创新成果将有力支持Omniverse 3D世界生成器、自动驾驶汽车系统及数字人产品等前沿应用的发展。
    的头像 发表于 08-07 16:51 486次阅读

    欢创播报 腾讯元宝首发3D生成应用

    App。 腾讯元宝APP发布时,就围绕工作效率场景、日常生活等场景提供了丰富的应用,并有创建个人智能体等个性化体验,“3D角色梦工厂”则将大模型生成技术和3D应用结合,进一步创新了元宝
    的头像 发表于 07-18 11:39 752次阅读
    欢创播报 腾讯元宝首发<b class='flag-5'>3D</b><b class='flag-5'>生成</b>应用

    英伟推出AI模型推理服务NVIDIA NIM

    英伟近日宣布推出一项革命性的AI模型推理服务——NVIDIA NIM。这项服务将极大地简化AI模型
    的头像 发表于 06-04 09:15 674次阅读

    VIVERSE 推行实时3D渲染: 探索Polygon Streaming技术力量与应用

    Streaming 3D 串流技术。 Polygon Streaming 3D 串流技术,支持高保真3D模型分享与协作,跨平台兼容,可以提升虚拟世界的流畅度和互动质量,为用户能够探索
    的头像 发表于 05-31 15:49 2336次阅读
    VIVERSE 推行实时<b class='flag-5'>3D</b><b class='flag-5'>渲染</b>: 探索Polygon Streaming技术力量与应用

    奥比中光英伟联办3D视觉创新应用竞赛圆满收官

    5月15日,奥比中光与NVIDIA(英伟)联合主办的“2024第四届3D视觉创新应用竞赛”圆满落幕。
    的头像 发表于 05-30 09:37 423次阅读
    奥比中光<b class='flag-5'>英伟</b><b class='flag-5'>达</b>联办<b class='flag-5'>3D</b>视觉创新应用竞赛圆满收官

    英伟首席执行官黄仁勋:AI模型推动英伟AI芯片需求

    近来,以ChatGPT为代表的AI聊天机器人已经导致英伟AI芯片供应紧张。然而,随着能够创造视频并进行近似人类交流的新型AI
    的头像 发表于 05-24 10:04 491次阅读

    进一步解读英伟 Blackwell 架构、NVlink及GB200 超级芯片

    能,加速模型的训练和推理过程。 2. 生成AI 解决方案 与英伟 Grace CPU、新一代网络芯片等产品一起,面向
    发表于 05-13 17:16

    烘焙vs渲染3D模型制作中的效率与质量之争

    3D建模和渲染领域,模型烘焙(Baking)和模型渲染(Rendering)是两个经常被提及的概念。尽管它们都与最终图像的
    的头像 发表于 05-12 08:27 448次阅读
    烘焙vs<b class='flag-5'>渲染</b>:<b class='flag-5'>3D</b><b class='flag-5'>模型</b>制作中的效率与质量之争

    ad19中3d模型不显示?

    封装库导入3d模型不显示,但导入3d模型后的封装库生成pcb文件时显示3d
    发表于 04-24 13:41

    NVIDIA生成AI研究实现在1秒内生成3D形状

    NVIDIA 研究人员使 LATTE3D (一款最新文本转 3D 生成AI 模型)实现双倍加速。
    的头像 发表于 03-27 10:28 492次阅读
    NVIDIA<b class='flag-5'>生成</b>式<b class='flag-5'>AI</b>研究实现在1秒内<b class='flag-5'>生成</b><b class='flag-5'>3D</b>形状

    Stability AI推出全新Stable Video 3D模型

    近日,Stability AI 推出了全新的 Stable Video 3D 模型,该模型以其独特的功能吸引了众多关注。此模型具备从单张图像
    的头像 发表于 03-22 10:30 838次阅读

    Adobe Substance 3D整合AI功能:基于文本生成纹理、背景

    Substance 3D Stager是以Adobe Dimension为基础改造而成,使用者可直观地进行3D场景构建,包括模型、材质和灯光等要素。借助其强大功能,能够生成极具观赏性的
    的头像 发表于 03-20 10:28 721次阅读

    英伟将推出生成AI专业认证

    在人工智能日益成为技术发展的核心领域的今天,英伟在近日举行的GTC大会上将推出生成AI专业认证。这一创新举措旨在帮助开发者、职场人士以及其他相关人员更好地证明和展示自己在
    的头像 发表于 03-19 11:44 877次阅读