0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

NVIDIA Research 在 CVPR 上赢得自动驾驶挑战赛并获得创新奖

NVIDIA英伟达企业解决方案 来源:未知 2023-08-24 17:10 次阅读

新研究成果带来实现安全自动驾驶系统所需的先进 3D Occupancy 预测。

wKgaomToSbmAZEAoAAEFQt-aMPs694.jpg

NVIDIA 以自动驾驶开发大赛 3D Occupancy 预测挑战赛冠军的身份亮相 CVPR 2023。

此次角逐冠军的 400 多份参赛作品共来自 10 个地区近 150 个团队。

3D Occupancy 预测是指预测场景中每个体素(即 3D 鸟瞰网格上的各个数据点)的状态的过程,体素可以被识别为自由、占用或未知三种状态。

观看 NVIDIA 自动驾驶实验室关于 3D Occupancy 预测的视频

3D Occupancy 网格预测对开发安全、鲁棒的自动驾驶系统至关重要。该功能利用 NVIDIA DRIVE 平台提供支持的先进卷积神经网络(CNN)和 Transformer 模型为自动驾驶汽车(AV)规划和控制堆栈提供信息

NVIDIA 学习和感知高级研究科学家 Zhiding Yu 表示:“NVIDIA 的获奖方案包含两项重要的先进自动驾驶(AV)技术。该方案展示了具有出色鸟瞰感知能力的先进模型设计,以及具有多达 10 亿个参数的视觉基础模型和大规模预训练在 3D Occupancy 预测方面的有效性。”

在过去几年中,自动驾驶感知已从处理 2D 任务,比如检测图像中的物体或自由空间等,发展到根据多个输入图像对 3D 世界进行推理。

NVIDIA 自动驾驶汽车应用研究总监兼杰出科学家 Jose Alvarez 表示,“这项技术能够灵活、精确而细致地呈现复杂交通场景中的物体,对于达到自动驾驶的安全感知要求至关重要。”

Yu 在太平洋时间 6 月 18 日(星期日)上午 10 点 20 分举行的 CVPR 端到端自动驾驶研讨会(https://opendrivelab.com/e2ead/cvpr23.html)以及太平洋时间 6 月 19 日(星期一)下午 4 点举行的自动驾驶视觉专题研讨会(https://vcad.site/#/)上介绍NVIDIA Research 的获奖作品。

CVPR 研讨会委员会表示,除了赢得该挑战赛的第一名之外,NVIDIA 还荣获本次活动的创新奖,以表彰其“在开发视角转换模块方面的新洞察”。与之前的方法相比,其“性能大幅提升”。

阅读 NVIDIA 关于参赛作品的技术报告:

https://opendrivelab.com/e2ead/AD23Challenge/Track_3_NVOCC.pdf?=&linkId=100000205404832

通过 3D Occupancy 预测提升车辆安全性

虽然传统 3D 目标检测(通常使用 3D 边界框来检测和呈现场景中的物体)是自动驾驶汽车感知领域的一项核心任务,但它具有局限性。例如缺乏表现力,边界框可能无法呈现足够的真实世界信息。它还需要为所有可能的物体进行分类标准和 ground truth 的定义,甚至包括在现实世界中很少见的物体,比如可能从卡车上掉落的道路危险物。

相比之下,3D Occupancy 预测能够为自动驾驶汽车的规划堆栈提供丰富信息,这对于端到端自动驾驶是必不可少的。

软件定义汽车可以不断通过升级,以添加经过证明和验证的新研发成果。研究成果(例如在 CVPR 上得到认可的研究)所带来的先进软件更新,正在推动实现新功能和更安全的驾驶能力。

NVIDIA DRIVE 平台可为汽车制造商带来加速车辆生产的解决方案,为确保安全可靠的自动驾驶汽车开发提供了从汽车到数据中心的全栈式硬件和软件。

CVPR 挑战赛介绍

CVPR 的 3D Occupancy 预测挑战赛要求参赛者开发在推理过程中只使用摄像头输入数据的算法。参赛者可以使用开源数据集和模型,从而推动对数据驱动算法和大型模型的探索。主办方提供了一个基准沙盒,以便参赛者将最新的先进 3D Occupancy 预测算法应用于真实世界场景。

NVIDIA 参加 CVPR

NVIDIA 在 CVPR 上发表了近 30 篇论文和演讲。在会上讨论自动驾驶的专家包括:

  • Jose Alvarez 在端到端自动驾驶研讨会:新兴任务和挑战研讨会上讨论自动驾驶汽车中的新 3D 感知挑战;并在嵌入式视觉研讨会上讨论优化用于实时推理的大型深度模型。

  • NVIDIA 深度学习总监 Nikolai Smolyanskiy 在端到端自动驾驶研讨会:感知、预测、规划和模拟上讨论自动驾驶汽车的实时交通预测。

  • NVIDIA 杰出工程师 Robin Jenkin 在与 CVPR 同时举行的 OmniCV 研讨会上讨论鱼眼相机的图像质量。

  • NVIDIA 自动驾驶汽车研究部门的研究科学家 Xinshuo Weng 在自动驾驶视觉主题研讨会上讨论用于自动驾驶的视觉解决方案。

CVPR 于 6 月 18 日至 22 日举行。查看议程上的其他讲座并进一步了解 NVIDIA 在 CVPR 上的情况:https://www.nvidia.com/en-us/events/cvpr/

专题图片由 OccNet 和 Occ3D 提供。

GTC 2024 演讲、海报和培训实验室内容征集现已开放。点击“阅读原文”扫描下方海报二维码,报名参加 GTC 演讲,分享您近期取得的成就


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英伟达
    +关注

    关注

    22

    文章

    3772

    浏览量

    91004
收藏 人收藏

    评论

    相关推荐

    一文聊聊自动驾驶测试技术的挑战创新

    随着自动驾驶技术的飞速发展,自动驾驶测试的重要性也日益凸显。自动驾驶测试不仅需要验证车辆的感知、决策、控制模块的独立性能,还需确保系统复杂场景中运行的整体可靠性。然而,
    的头像 发表于 12-03 15:56 160次阅读
    一文聊聊<b class='flag-5'>自动驾驶</b>测试技术的<b class='flag-5'>挑战</b>与<b class='flag-5'>创新</b>

    NVIDIA ResearchECCV 2024展示多项创新成果

    米兰举行的欧洲计算机视觉国际会议 (ECCV) NVIDIA Research 展示了多项突破性的创新成果,共发表了 14 篇论文。
    的头像 发表于 11-19 15:07 297次阅读

    e络盟社区携手恩智浦发起智能空间楼宇自动挑战赛

    安富利旗下全球电子元器件产品与解决方案分销商e络盟社区与恩智浦联合发起围绕智能空间楼宇自动化设计的全新挑战赛。本次挑战赛邀请工程师和技术爱好者利用恩智浦FRDM MCX A 系列(A15X)开发套件,开发
    的头像 发表于 11-14 10:44 222次阅读
    e络盟社区携手恩智浦发起智能空间楼宇<b class='flag-5'>自动</b>化<b class='flag-5'>挑战赛</b>

    50万奖金池!开放原子大赛——第二届OpenHarmony创新应用挑战赛正式启动

    第二届OpenHarmony创新应用挑战赛作为开放原子大赛旗下的重要项,聚焦 OpenHarmony应用开发,致力提升开发者的动手实践能力与开发创新应用的能力。
    发表于 10-24 15:40

    NVIDIA Research端到端自动驾驶模型引领国际挑战赛

    NVIDIA 国际计算机视觉与模式识别会议(CVPR展示了用于自动驾驶汽车开发的加速计算和生成式 AI 的突破技术。
    的头像 发表于 09-09 10:11 510次阅读

    NVIDIA为AI城市挑战赛构建合成数据集

    一年一度的 AI 城市挑战赛中,来自世界各地的数百支参赛队伍 NVIDIA Omniverse 生成的基于物理学的数据集测试了他们的
    的头像 发表于 09-09 10:04 475次阅读

    AI4Science黑客松光子计算挑战赛成功举办

    经过数月角逐,第二届AI4Science黑客松竞赛日前落下帷幕。曦智科技主持的光子计算挑战赛中,参赛选手何自强和来自东北大学的参赛队伍The Power of Light获得优胜
    的头像 发表于 08-07 09:58 511次阅读

    FPGA自动驾驶领域有哪些优势?

    FPGA(Field-Programmable Gate Array,现场可编程门阵列)自动驾驶领域具有显著的优势,这些优势使得FPGA成为自动驾驶技术中不可或缺的一部分。以下是FPGA
    发表于 07-29 17:11

    FPGA自动驾驶领域有哪些应用?

    是FPGA自动驾驶领域的主要应用: 一、感知算法加速 图像处理:自动驾驶中需要通过摄像头获取识别道路信息和行驶环境,这涉及到大量的图像处理任务。FPGA
    发表于 07-29 17:09

    浪潮信息获CVPR2024自动驾驶挑战赛&quot;Occupancy&amp; Flow&quot;冠军

    北京2024年6月25日 /美通社/ -- 近日,全球权威的CVPR 2024自动驾驶国际挑战赛(Autonomous Grand Challenge)中,浪潮信息AI团队所提交的"
    的头像 发表于 06-25 20:29 372次阅读
    浪潮信息获<b class='flag-5'>CVPR</b>2024<b class='flag-5'>自动驾驶</b><b class='flag-5'>挑战赛</b>&quot;Occupancy&amp; Flow&quot;冠军

    科技与Momenta签署战略合作,助力自动驾驶行业升级

    随着自动驾驶技术逐步走向成熟并得到广泛应用,提升创新、迭代效率成为技术普及和市场竞争关键环节。作为自动驾驶领域的“大脑”和“眼睛”,Momenta和禾科技将联手推行信息驱动的智能
    的头像 发表于 04-22 09:40 505次阅读

    Zebra Aurora深度学习OCR算法荣获CAIMRS颁发的自动创新奖

    第二十二届中国自动化及数字化年度评选活动中,Zebra Aurora深度学习OCR算法获得了由中国自动化及数字化产业年会(简称CAIMRS)颁发的
    的头像 发表于 03-20 16:35 467次阅读

    SiWx917 SoC荣获CES 2024创新奖之嵌入式技术奖项

    (Innovation Awards)的评选,一举获得今年度CES创新奖之嵌入式技术(Embedded Technologies)的殊荣。
    的头像 发表于 01-10 17:10 500次阅读

    OpenHarmony人形机器人创新挑战赛来啦

    12月28日,第二十六届中国机器人及人工智能大赛人形机器人创新挑战赛苏州正式发布,首次结合
    的头像 发表于 12-30 08:32 1097次阅读
    OpenHarmony人形机器人<b class='flag-5'>创新</b><b class='flag-5'>挑战赛</b>来啦

    语音数据集自动驾驶中的应用与挑战

    随着人工智能技术的快速发展,自动驾驶汽车已经成为交通领域的研究热点。语音数据集自动驾驶中发挥着重要的作用,为驾驶员和乘客提供了更加便捷和安全的交互方式。本文将详细介绍语音数据集
    的头像 发表于 12-25 09:48 556次阅读