0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

一款AI驱动的自动微型赛车步入正轨

jf_9aVl32Dp 来源:Arm软件开发者 2023-02-13 10:41 次阅读

第65届年度Daytona 500将于2023年2月19日举行,对许多人来说,这场精英NASCAR赛事是赛车界的巅峰。目前,还没有计划看到自动驾驶汽车与有司机的汽车间的比赛,但在未来的比赛中想象这种情况并不太难。在1月初的CES上,有一场测试最佳自动驾驶赛车的比赛。

为了实现这样的愿景,您需要在引擎盖下使用一些严肃的技术来为车辆提供动力并确保正确的轨道导航。

出于这个原因,很容易理解为什么3D激光雷达是用于自动测绘和导航的主要工具之一。它对光线条件不敏感,可以通过反射通道检测颜色,可以提供完整的360度环境视图,并且不需要任何“学习”来检测障碍物。

来自激光雷达的点云信息也可以方便地实现地图绘制和定位,因为车辆知道它在所有点的位置。但激光雷达价格昂贵且体积庞大,这限制了其对许多开发人员的实用性,特别是如果您使用的是比普通赛车更小的车辆。

那么,如果有一种替代使用激光雷达的方法可以在自动驾驶赛车中实现类似的功能呢?

圣地亚哥大学Triton AI数据科学项目

作为加州大学圣地亚哥分校2021 Triton Data Science capstone(https://dsc-capstone.github.io/projects-2020-2021/#project_14) 项目的一部分,三名学生着手制造一辆AI驱动的自动微型赛车(https://sisaha9.github.io/camera_mapping_navigation_website/)。他们探索了在选择尺寸适合赛车使用的更便宜的摄像头解决方案而不是使用昂贵的激光雷达传感器时,确保有效的自主导航和同时定位和测绘(SLAM)的困难。

用摄像头代替激光雷达确实有一些缺点,包括需要特殊编程来处理各种光线条件。它需要多个摄像头来创建360度视野。

他们的项目探索了使用ROS、Detectron2的对象检测和图像分割功能进行定位、对象检测和避免以及RTAB地图(Real-Time Appearance-Based Mapping)进行地图绘制的自动赛车导航方法。

学生Youngseo Do、Jay Chong和Siddharth Saha在研究中有三个主要目标:

。 使用RTAB Map SLAM算法,使用单个摄像头和其他传感器信息进行测绘和定位

。 使用Facebook AI Detector2深度学习和ROS的单摄像头进行避障和车道跟随

。 使用ROS rqt_reconfigure微调摄像头,使其对变化的光线条件不太敏感

有关他们项目的详细信息,请参见以下视频:

74d6ed44-ab47-11ed-bfe3-dac502259ad0.png

视频链接:

B站:https://www.bilibili.com/video/BV1DD4y1P7B5/

Youbube: https://youtu.be/6GVzqZUqc1w

视频1-DSC 180B自动驾驶汽车团队:使用CV进行自动测绘、定位和导航

下面是汽车的快速演示:

75067f28-ab47-11ed-bfe3-dac502259ad0.png

视频链接:

B站:https://www.bilibili.com/video/BV11Y411i7DX/

Youtube: https://www.youtube.com/watch?v=A1xKjWAHhZo

视频2-基于Jetson DNN的自主赛车

团队是如何实现目标的?

鉴于项目的复杂性,学生选择将项目分为三个不同的部分:

。 通过RTAB Map SLAM进行测绘和定位

。 使用Detector2避免物体

。 调整相机的感光度

通过RTAB Map SLAM进行测绘和定位

该团队考虑了包括GPS在内的导航选项,但在他们的演示中指出,快速移动和精确读数可能不可靠。他们选择使用RTAB地图,因为它与他们的传感器兼容,并且他们能够使用在线模拟器进行测试,帮助他们熟悉它的工作原理

使用Detector2避障

其目的是使用图像输入从这些图像中提取障碍物和边界信息,以便赛车在驾驶时知道最佳的下一步是什么。

调整相机的感光度

正如学生们在演讲中所指出的,摄像机必须“尽可能对光线不敏感”,因为光线条件的变化会影响赛车的视觉效果,尤其是在赛道中央的黄线。

项目硬件

为了使这个项目成为现实,学生们使用了以下硬件:

。 JetRacer内置Jetson Xavier NX开发套件。

Intel Realsense D455:一款深度感应摄像头,专为避免碰撞、3D扫描、数字标牌和体积测量而设计。

。 Flipsky VESC速度控制器,用于向JetRacer发送移动命令。

赛车在一个室内赛道上进行了测试,该赛道包含多个交通锥,赛车在试图让赛车始终保持在赛道内时,应避开这些交通锥。

未来的改进

在项目实施时,学生们希望从手动编码的驾驶规则改为强化学习技术,以提高行为的灵活性。如果他们需要更多的传感器和规则,这将派上用场。他们还想训练该模型来检测其他汽车,以便它可以用于头对头(head-to-head)比赛,但当时大流行阻止了这种情况的发生。

未来会有NASCAR吗?可能是的。该项目的学生之一Siddharth Saha和加州大学圣地亚哥分校的学生Haoru Xue是两项自动驾驶汽车比赛挑战的技术负责人:

。 11月,他们的车队在德克萨斯州赛车场举行的Indy自治挑战赛中获得第二名。

。 1月初,他们的团队在拉斯维加斯汽车赛道的CES自动挑战赛上获得第三名。

这两名学生在加州大学圣地亚哥分校与NVIDIA Jetson合作期间开始学习自动驾驶汽车。

有关本月Jetson项目的更多信息,请访问capstone项目网站(https://sisaha9.github.io/camera_mapping_navigation_website/)。

有关自动驾驶赛车的更多信息,请参阅湾区开发人员之前所做的工作:使用NVIDIA Jetson DIY自动驾驶赛车(https://developer.nvidia.com/blog/diy-autonomous-car-racing-with-nvidia-jetson/)。

审核编辑 :李倩

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2550

    文章

    51061

    浏览量

    753280
  • 激光雷达
    +关注

    关注

    968

    文章

    3971

    浏览量

    189875
  • 深度学习
    +关注

    关注

    73

    文章

    5503

    浏览量

    121131

原文标题:本月NVIDIA Jetson项目:一款AI驱动的自动微型赛车步入正轨

文章出处:【微信号:Arm软件开发者,微信公众号:Arm软件开发者】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    急速赛车win7主题

    。这是一款辆很酷炫的赛车作为背景图而制作的汽车主题,希望各位喜欢这款急速赛车win7主题。更多系统美化主题下载尽在33la主题官网。下载地址:http://www.33.la/w7
    发表于 01-11 09:02

    一款高效率LED恒流驱动-LN2401

    本帖最后由 dcx665 于 2017-8-14 09:37 编辑 LN2401是一款由基准电压源、振荡电路、比较器、PWM/PFM 控制电路等构成的CMOS降压恒流驱动器。利用PWM/PFM
    发表于 08-13 20:29

    找工程师设计开发一款微型超声波雷达的电子产品方案

    找工程师设计开发一款微型超声波雷达的单片机电子产品方案,主机电路越小越好,供电电压电流越小越好,用微型雷达探头,3个雷达探头,每个雷达探测障碍物的距离数据分别对应选择用微型震子振动提示
    发表于 02-11 00:16

    分享一款不错的基于VHDL的TP UP-SF微型打印机控制器设计

    分享一款不错的基于VHDL的TP UP-SF微型打印机控制器设计
    发表于 04-30 06:59

    介绍一下一款简单易用的嵌入式AI方案

    公司玩了大半年的嵌入式AI平台,现在产品进入量产模式,也接触了很多嵌入式方案,有了些心得体会,本人不才,在这里介绍一下一款简单易用的嵌入式AI方案——Movidius Myriad
    发表于 10-27 06:02

    方程式赛车步入电动时代

    自打汽车一百多年前诞生以来,赛车运动就没停止过,随着电动时代的到来,狂奔的赛车又会做如何改变呢? 震耳欲聋的引擎轰鸣声,伴随着滚滚的热浪,辆辆赛车伴随着激动的观众呐喊声中呼啸而过,这
    发表于 11-20 10:52 1次下载

    物联网发展步入正轨,这些新的物联网创业项目你知道吗?

    顾名思义,物联网就是物物相连的互联网。与其说物联网是网络,不如说物联网是业务和应用。近两年,物联网的发展也步入正轨,今年,又有那些新的物联网创业项目呢?
    发表于 06-04 08:12 2.5w次阅读

    随着AI技术的不断发展 AI与智能手机的结合正逐渐步入正轨

    十年前,人们或许无法想象智能手机会彻底融入到我们的生活之中,二十年前,我们更无法想象到移动网络能够发展至如今的盛况。而今,AI手机的萌芽,或许正是开启下个时代的密钥。当然,我们目前还无法对未来
    发表于 11-08 15:09 1135次阅读

    台积电开始批量生产5nm芯片的工作已经步入正轨

    尽管最近有消息称苹果已要求台积电(TSMC)将A14处理器的生产推迟到两个季度,但据台媒DigiTimes报道,台积电4月份开始批量生产该5nm芯片的工作已经“步入正轨”。
    的头像 发表于 04-02 09:51 2910次阅读

    特斯拉二季度在中国营收增长103%约14亿美元

    据外媒报道,特斯拉直期望在中国市场保持强劲的销售势头,该计划似乎已步入正轨
    发表于 07-30 10:05 338次阅读

    基于C-V2X的车路协同成为自动驾驶产业新的发展路径

    近年来,随着汽车新四化进程推进,自动驾驶产业实现了快速发展,围绕单车智能的产业进入发展逐渐步入正轨。但从去年开始,大批自动驾驶公司发展进入瓶颈期,高昂成本与技术瓶颈,开始让业界意识到自动
    的头像 发表于 09-07 11:35 3149次阅读

    TCL电子向AIoT领域的转型,逐渐步入正轨

    的彩电企业,更是深入布局向AIoT生态转型,TCL电子就是其中的家。 转型脚步加快,新业务再创新高 自收购TCL通讯后,TCL电子向AIoT领域的转型,逐渐步入正轨,并且转型进度也在不断加快。从Q3财报来看,这种趋势非常明显
    的头像 发表于 11-26 16:00 1548次阅读

    三星5nm旗舰芯片明年量产,誓要向高通下战书

    放弃自研架构,调整路线迁移,并与外部合作,Exynos1080的推出意味着三星手机芯片步入正轨
    的头像 发表于 11-30 11:02 1665次阅读

    NCP1256,一款用于离线转换器的微型控制器

    NCP1256,一款用于离线转换器的微型控制器
    发表于 11-15 19:26 1次下载
    NCP1256,<b class='flag-5'>一款</b>用于离线转换器的<b class='flag-5'>微型</b>控制器

    构建一款AR/AI健身游戏

    电子发烧友网站提供《构建一款AR/AI健身游戏.zip》资料免费下载
    发表于 06-12 14:49 0次下载
    构建<b class='flag-5'>一款</b>AR/<b class='flag-5'>AI</b>健身游戏