0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

基于AI的实时感知提升自动代客泊车功能

星星科技指导员 来源:NVIDIA 作者:NVIDIA 2022-05-30 10:11 次阅读

这是 NVIDIA DRIVE Labs 系列 中的最新视频。这些视频以工程为重点,介绍了各个自主车辆的挑战以及 NVIDIA 驱动团队如何应对这些挑战。

自动停车涉及一系列复杂的感知和决策算法,传统上依赖高清( HD )地图来检索停车信息

然而,地图覆盖率和较差或过时的本地化信息可能会限制此类系统。除此之外,系统还必须理解和解释不同地区的停车规则。

在这个 DRIVE Labs 的帖子中,我们展示了基于 AI 的实时感知如何帮助将自动停车扩展到全球各个地区。

自动泊车系统概述

对停车规则的理解和解释可能会比表面上看起来更加微妙。

可以覆盖有效区域内的不同停车规则。例如,“禁止停车”可以覆盖“禁止泊车”

此外,非停车相关标志可以推断停车规则。例如,在德国,任何公共汽车站标志 15 米范围内都不允许停车。在美国,停车标志前 30 英尺内停车是违法的。

最后,除了像物理标志这样的明确线索外,还有携带停车信息的隐含标志。例如,在许多地区,交叉口表示上一个活动停车规则的结束。

基于高级算法的停车标志辅助( PSA )系统对于自动车辆了解停车规则的复杂性并做出相应反应至关重要。

传统的 PSA 系统仅依赖高清地图的输入。然而, NVIDIA DRIVE AV 软件堆栈利用最先进的深度神经网络( DNN )和计算机视觉算法来提高真实场景中自动停车的覆盖率和鲁棒性。这些技术可以实时检测、跟踪和分类各种停车交通标志和道路交叉口。

WaitNet DNN 检测交通标志和十字路口。

wait perception 堆栈跟踪单个标志和交点,通过三角测量提供 3D 位置。

SignNet DNN 标识交通标志类型。

然后,来自模块的结果被输入 PSA 系统,该系统使用这些数据来确定汽车是否在停车带内,限制条件是什么,以及汽车是否允许在该区域内停车或停车。

停车标志辅助系统概述

PSA 系统接收到检测到的停车标志和道路交叉口后,将对象抽象为一个 启动停车标志 或 终点停车标志 。这种抽象级别允许系统在全球范围内扩展。

启动停车标志 标志着新停车带的潜在开始, 终点停车标志 可能会关闭一个或多个现有停车带。图 1 和图 2 显示了停车带是如何形成的。

poYBAGKUJ_OAJ3e4AABEmhlvXGA566.png

图 1 :形成停车带

图 1 将标志和道路交叉口抽象为停车带。该图显示,单个标志可以生成多个虚拟标志。例如,中间的符号作为最左边符号的“结束”符号,作为最右边符号的“开始”。

pYYBAGKUJ_qAXthyAABWq38xL80544.png

图 2 :禁止停车区旁的汽车。

除了形成停车带外, PSA 系统还利用标志的语义将停车带分为禁止停车、禁止停留、允许停车和未知状态。然后,可以将此信息提供给驾驶员或任何自动停车系统。

poYBAGKUKACABVOBAAHflVlwC24754.png

图 3 :PSA 的高水平工作

图 3 显示了 PSA 系统的主要功能工作流。在帧 A 中,检测到“停车区开始”标志,并创建新的停车带。汽车行驶一段时间后,检测到“停车区结束”标志,该标志与该停车带的开始标志相匹配。

最后, PSA 系统将所有激活的停车带存储在其存储器中,并根据停车带所隐含的交通规则向驾驶员发出当前停车状态的信号

结论

PSA 系统在 NVIDIA DRIVE AGX 上运行仅几毫秒,就可以以惊人的准确性实现复杂的决策。它还兼容任何使用实时摄像头传感器输入的仅感知自动车辆堆栈。

我们目前的 SignNet DNN 支持欧洲 20 多个停车标志,包括公共汽车停车标志、禁止停车标志和禁止停车标志,覆盖范围不断扩大。我们还将光学字符识别( OCR )和自然语言处理( NLP )模块添加到系统中,以处理符号上书写文本携带的复杂信息。

关于作者

邹珂轩是 NVIDIA 自主车辆感知团队的计算机视觉工程师。他目前正在开发动态和静态对象的多摄像头跟踪。过去,他是基于实时感知的等待条件系统(包括速度辅助系统和停车标志辅助系统)各种功能和算法的核心贡献者之一。克劳斯在伊利诺伊大学香槟分校获得计算机工程硕士学位。

Maroof Mohammed Farooq 是 NVIDIA 的高级软件工程师。他是自动车辆感知团队的成员,在该团队中,他致力于开发动态和静态障碍物的摄像头对象跟踪器。过去,他为路径感知、路标识别和等待条件系统的基于 AI 的解决方案的设计和开发做出了贡献。他在南加州大学完成了信号处理硕士学位。

窦航是 NVIDIA 自主车辆感知团队的技术负责人和工程师经理。他领导了等待条件系统(道路规则、标志、灯光、交叉口区域、路标等的语义理解)的开发,目前正在领导开发动态对象(车辆、行人等)和静态对象(自由驾驶空间等)的通用摄像头跟踪。Hang在圣路易斯华盛顿大学获得了计算机科学博士学位,由Ju教授指导。Hang的工作领域包括计算机图形学、计算机视觉和深度学习,尤其对几何、渲染、检测和分类感兴趣。

审核编辑:郭婷

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • NVIDIA
    +关注

    关注

    14

    文章

    4949

    浏览量

    102837
  • 计算机
    +关注

    关注

    19

    文章

    7434

    浏览量

    87745
  • 深度学习
    +关注

    关注

    73

    文章

    5493

    浏览量

    121005
收藏 人收藏

    评论

    相关推荐

    自动AI开发平台功能介绍

    自动AI开发平台集成了多种算法、工具和框架,旨在帮助开发者更快速、高效地设计、训练、部署和管理AI模型。以下,AI部落小编将详细介绍自动
    的头像 发表于 11-14 09:29 161次阅读

    自动泊车HiL仿真测试介绍#自动泊车 #VTHiL

    自动泊车
    北汇信息POLELINK
    发布于 :2024年10月11日 18:29:19

    智驾仿真测试实战之自动泊车HiL仿真测试

    汽车进入智能化时代,自动泊车功能已成为标配。在研发测试阶段,实车测试面临测试场景覆盖度不足、效率低下和成本高昂等挑战。为解决这些问题,本文提出一种自动
    的头像 发表于 10-10 08:05 2629次阅读
    智驾仿真测试实战之<b class='flag-5'>自动</b><b class='flag-5'>泊车</b>HiL仿真测试

    从小鹏M03自动泊车撞上奥迪聊聊智驾现状

    最近有一位网友在微博上发文称,在使用小鹏MONA M03自动泊车功能时,撞到了别人的车,其中特别强调了在自动泊车过程中,已经检测到了对方车辆
    的头像 发表于 09-20 08:59 946次阅读
    从小鹏M03<b class='flag-5'>自动</b><b class='flag-5'>泊车</b>撞上奥迪聊聊智驾现状

    聊聊自动驾驶离不开的感知硬件

    感知硬件。自动驾驶感知硬件的主要功能是帮助车辆“看见”和“理解”周围环境,为驾驶决策提供必要的实时信息。今天智驾最前沿就带大家来盘点常见的
    的头像 发表于 08-23 10:18 416次阅读

    宏景智驾自动泊车2.0系统征服高难度车位

    随着自动泊车技术(APA)的进步以及装车成本的降低,该功能已经实现在多种场景下的落地,有效解决了用户泊车难问题。近年来,各大主机厂加大对自动
    的头像 发表于 07-30 15:15 593次阅读

    超声波雷达在APA自动泊车功能中的应用与仿真

    、超声波雷达等)完成对有效车位以及障碍物的感知识别,再进行泊车路径的规划、车辆运动的控制,从而完成泊车的工作。本文将重点介绍超声波雷达在APA自动
    的头像 发表于 07-19 08:25 3441次阅读
    超声波雷达在APA<b class='flag-5'>自动</b><b class='flag-5'>泊车</b><b class='flag-5'>功能</b>中的应用与仿真

    智界S7将于六月全球首发自动泊车与召唤VPD商用功能

     这一升级版的泊车技术旨在实现“驾驶者自助泊车与接驾”的操作体验,无需亲自动手即可成功泊车
    的头像 发表于 05-09 16:45 590次阅读

    极狐阿尔法S先行版 PRO上市:搭载三激光雷达及800V高压快充技术

    新款汽车使用的华为ADS2.0高级智能驾驶解决方案集成三颗激光雷达,支持全程无碰撞智能巡航、全自动泊车、远程控制泊车自动
    的头像 发表于 04-26 09:59 450次阅读

    未来已来,多传感器融合感知自动驾驶破局的关键

    模态精准感知信息,使自动驾驶系统可以实时精准地感知道路上的各种状况。 昱感微融合感知产品方案创新性地 将可见光摄像头、红外摄像头以及4D毫
    发表于 04-11 10:26

    极氪007公测启动,量产机械车位自动泊车业内首创

    极氪007固体系统6.1版带来了五项先进的智能泊车功能,包括车位识别、复杂停车位泊入、泊车效率提升以及无划线区泊车等多个棘手问题都得到了解决
    的头像 发表于 03-27 14:32 402次阅读

    特斯拉全新自动泊车功能上线,可平行泊车

     据Not a Tesla App报道,此次2024年2月11日的软件更新新增内容包括自动泊车以及平行泊车功能。在行车时,车辆屏幕将标示出可用车位,并以红色P标记做特殊提示;同时,驾
    的头像 发表于 03-22 11:16 651次阅读

    自动泊车和遥控泊车的区别

    存在着显著的差异。本文将比较自动泊车和遥控泊车的区别。 一、自动泊车技术 自动
    的头像 发表于 01-31 13:43 1788次阅读

    告别停车烦恼:自动泊车技术引领新时代

    随着科技的不断发展,自动驾驶技术已经成为汽车行业的一个重要研究方向。其中,自动泊车技术作为自动驾驶技术的一个重要应用场景,受到了广泛关注。自动
    的头像 发表于 01-05 10:02 395次阅读
    告别停车烦恼:<b class='flag-5'>自动</b><b class='flag-5'>泊车</b>技术引领新时代

    LeddarTech 发布 LeddarVision Parking 融合与感知软件堆栈

    LeddarTech 发布专为高级 ADAS L2/L2+ 级自动泊车泊车辅助应用设计的 LeddarVision Parking 融合与感知软件堆栈 魁北克市2023年12月21日
    的头像 发表于 12-22 06:00 813次阅读
    LeddarTech 发布 LeddarVision Parking 融合与<b class='flag-5'>感知</b>软件堆栈