0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

麻省理工学院在NVIDIA DRIVE AGX Pegasus上开发全新自动驾驶技术

世强SEKORM 来源:NVIDIA英伟达企业解决方案 作者:NVIDIA英伟达企业解 2021-08-02 15:59 次阅读

在今年COMPUTEX上发表的论文详细介绍了综合深度神经网络的开发过程。

全新自动驾驶技术将能够“独当一面”。

麻省理工学院的研究人员正在开发一个一体化深度神经网络(DNN)为自动驾驶汽车提供支持,并取代由多个网络组成的系统。在今年COMPUTEX上发表的这项研究使用了NVIDIA DRIVE AGX Pegasus在车辆中运行网络,能够高效、实时地处理堆积成山的激光雷达数据。

自动驾驶汽车传感器会产生大量数据——如果一个由50辆车组成的车队每天行驶6小时,那么每天就会产生约1.6PB的传感器数据。若把所有这些数据都存储在1GB U盘上,这些U盘将能覆盖100多座足球场。

自动驾驶汽车必须即时处理这些数据才能感知周围环境并安全行驶。但由于数据量巨大,一个DNN很难完成这种处理,因此大多数方法都会使用多个网络和高清晰度地图。

在他们的论文中,麻省理工学院团队详细介绍了如何使用一个一体化DNN尝试新的自动驾驶策略,首先就是要完成实时激光雷达传感器数据处理任务。

通过运用高性能、高能效的NVIDIA DRIVE AGX Pegasus,该团队进一步加快激光雷达的计算速度以实现甚至超越这一目标,其运行速度比目前最先进的系统还要快15倍。

提高数据处理效率

如今,许多开发中的自动驾驶系统除了使用高清地图之外,还使用一系列DNN来处理传感器数据。这一组合能够使自动驾驶汽车快速确定自己在空间的位置并探测其他道路使用者、交通标志和其他物体。

虽然这种方法为安全自动驾驶提供了必要的冗余和多样性,但它很难在尚未进行测绘的地区实施。

此外,使用激光雷达传感器的自动驾驶系统需要每秒处理周围环境中的200多万个点。不同于2D图像数据,激光雷达点在3D空间中极为稀疏。由于没有针对此类数据的定制化架构,因此这对于现代计算硬件而言是一个巨大的挑战。

为了实现比基本架构更高的速度和能效,麻省理工学院团队开发出新的改进措施。

麻省理工学院的DNN能够执行整个自动驾驶系统的功能。这套完整的功能是通过使用大量人类驾驶数据来训练网络而实现的,这些数据教会了它能够像人类驾驶者那样将驾驶视为一个整体,而不是把驾驶分解成多个具体的任务。

虽然这种方法仍在开发中,但它具有很大的潜在优势。

在车辆中运行一个一体化DNN明显比运行多个专用网络更高效,这为其他功能开辟了计算空间。而且由于DNN依靠训练而不是地图来实现在未测绘道路上的导航,因此它具有更高的灵活性。随着效率的提高,车辆还能实时处理更多的丰富感知数据。

使用NVIDIA DRIVE大幅提高性能

当与高性能的中央计算系统相结合时,麻省理工学院发现其DNN的使用更加得心应手。

NVIDIA DRIVE AGX Pegasus是一款专为L4级和L5级自动驾驶系统设计的AI超级计算平台。它结合了两个NVIDIA Xavier SoC和两个NVIDIA Turing架构GPU的性能,实现了前所未有的每秒320万亿次运算性能。

麻省理工学院的研究人员已着手在某个计算系统上开发DNN。该系统不仅功能强大,而且在目前正在开发的自动驾驶系统中也很常见。

共同领导该项目的麻省理工学院博士生Alexander Amini表示:“我们希望有一个高度灵活的模块化AV系统,而NVIDIA正是这个领域的领导者。Pegasus能够处理来自各种传感器的输入流,让开发人员很容易实现他们的DNN。”

DNN的激光雷达感知能力只是麻省理工学院研究人员最初的自动驾驶开发目标。Amini表示,团队正在设法解决组合传感器流、与其他车辆之间更复杂的交互以及恶劣天气条件等问题——而这些问题的解决都用到了NVIDIA DRIVE解决方案。

编辑:jq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • NVIDIA
    +关注

    关注

    14

    文章

    4952

    浏览量

    102861

原文标题:独当一面:麻省理工学院在NVIDIA DRIVE AGX Pegasus上开发出一体化自动驾驶网络

文章出处:【微信号:sekorm_info,微信公众号:世强SEKORM】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    麻省理工学院研发全新纳米级3D晶体管,突破性能极限

    11月7日,有报道称,美国麻省理工学院的研究团队利用超薄半导体材料,成功开发出一种前所未有的纳米级3D晶体管。这款晶体管被誉为迄今为止最小的3D晶体管,其性能与功能不仅与现有的硅基晶体管相当,甚至某些方面还超越了后者。
    的头像 发表于 11-07 13:43 319次阅读

    麻省理工学院推出新型机器人训练模型

    近日,据TechCrunch报道,麻省理工学院的研究团队展示了一种创新的机器人训练模型,该模型突破了传统模仿学习方法的局限,不再依赖标准数据集,而是借鉴了大型语言模型(LLM)如GPT-4等所使用的大规模信息处理方式,为机器人学习新技能开辟了全新的道路。
    的头像 发表于 11-04 14:56 446次阅读

    VILA与其他模型提供边缘AI 2.0方面的表现

    VILA 是 NVIDIA 研究部门与麻省理工学院共同开发的高性能视觉语言模型系列。最大的模型约有 400 亿参数,最小的模型约有 30 亿参数,并且完全开源(包括模型检查点、训练代码和训练数据)。
    的头像 发表于 10-10 10:06 182次阅读
    VILA与其他模型<b class='flag-5'>在</b>提供边缘AI 2.0方面的表现

    美国佐治亚理工学院一行莅临达实智能调研

    近日,美国佐治亚理工学院“聚焦数据科学领域·深度探访粤港澳大湾区”学生代表团来深交流。美国佐治亚理工学院(Georgia Institute of Technology)一行探访了大湾区科技企业代表达实智能。
    的头像 发表于 09-26 09:21 473次阅读

    FPGA自动驾驶领域有哪些应用?

    是FPGA自动驾驶领域的主要应用: 一、感知算法加速 图像处理:自动驾驶中需要通过摄像头获取并识别道路信息和行驶环境,这涉及到大量的图像处理任务。FPGA处理图像
    发表于 07-29 17:09

    麻省理工学院研发RoboGrocery系统,杂货店自动化装袋新篇章

    科技日新月异的今天,自动化和智能化正逐渐渗透到我们生活的方方面面。近日,麻省理工学院计算机科学与人工智能实验室(CSAIL)的一项创新技术引起了广泛关注——RoboGrocery系统
    的头像 发表于 07-01 16:49 572次阅读

    感谢东莞理工学院对我司导热系数测试仪的认可

    东莞理工学院作为国内的高等学府,一直致力于科学研究和教育事业的发展,能够得到这样一所学府的认可,无疑是对我们技术实力和产品质量的肯定。这份认可,如同春日里的一缕阳光,温暖而明亮,照亮了我们前行的道路
    的头像 发表于 06-25 09:55 242次阅读
    感谢东莞<b class='flag-5'>理工学院</b>对我司导热系数测试仪的认可

    苏黎世联邦理工学院报告:Rowhammer攻击对高端RISC-V CPU的潜在风险

    来源:内容由RISC-V国际人才培养认证中心编译自DRAMSec,作者:MicheleMarazzi;KavehRazavi。苏黎世联邦理工学院的研究人员发表了一篇题为“RISC-H:针对
    的头像 发表于 06-15 08:36 340次阅读
    苏黎世联邦<b class='flag-5'>理工学院</b>报告:Rowhammer攻击对高端RISC-V CPU的潜在风险

    一种用于化学和生物材料识别的便携式拉曼光谱解决方案

    基于扫频光源的紧凑型拉曼光谱系统:美国麻省理工学院(MIT)和韩国科学技术院(KAIST)的研究人员开发了一种用于化学和生物材料识别的便携式拉曼光谱解决方案,克服了光谱仪笨重的局限性。
    的头像 发表于 04-16 10:35 509次阅读
    一种用于化学和生物材料识别的便携式拉曼光谱解决方案

    麻省理工与Adobe新技术DMD提升图像生成速度

    2023年3月27日,据传,新型文生图算法虽然使得图像生成无比逼真,但奈何运行速度较慢。近期,美国麻省理工学院联合Adobe推出新型DMD方法,仅略微牺牲图像质量就大幅度提高图像生成效率。
    的头像 发表于 03-27 14:17 490次阅读

    霍尼韦尔与南方泵业开展战略合作,四川成都一家红外热成像专用图像处理芯片服务商完成A+轮融资

    麻省理工学院的研究生 Daniel Monagle 该校官网发表的一篇文章中表示:“我们展示了一个无需电池的传感器,并且证明了这是一个可行的解决方案。我们希望其他人能利用我们的框架设计他们自己的传感器,共同推动这项技术的发展
    的头像 发表于 03-14 08:42 639次阅读
    霍尼韦尔与南方泵业开展战略合作,四川成都一家红外热成像专用图像处理芯片服务商完成A+轮融资

    瑞士苏黎世联邦理工学院新型四足机器人单腿完成开关门、移动任务

    据本周五出版的Popular Science杂志报道,近日瑞士苏黎世联邦理工学院机器人系统实验室的科研团队展示了新研究进展:他们训练了自家的机器狗,让其用单腿操控门锁和移动物品,同时依靠其余三腿维持正常行走及平衡。
    的头像 发表于 02-25 11:55 652次阅读

    麻省理工学院开发出新的RFID标签防篡改技术

    的解决方案。 麻省理工学院的研究人员推出了一项革命性的发明——新型防篡改ID标签。它不仅尺寸小巧、成本低廉,而且具备强大的防伪功能,有望彻底改变商品真伪鉴定的格局。 研究人员巧妙地利用太赫兹波的特性,设计出了这种新型防篡改
    的头像 发表于 02-22 11:30 591次阅读
    <b class='flag-5'>麻省理工学院</b><b class='flag-5'>开发</b>出新的RFID标签防篡改<b class='flag-5'>技术</b>

    迷思科技获数千万Pre A轮融资,安森美和理想汽车续签长期供货协议

    ‍ 传感新品 【美国麻省理工学院:研发吸入式传感器,实现早期肺癌检测无需做CT】 美国麻省理工学院研究人员开发出一项新技术,可使诊断肺癌变得像吸入纳米颗粒传感器一样简单,然后进行尿检就
    的头像 发表于 02-20 18:13 1009次阅读
    迷思科技获数千万Pre A轮融资,安森美和理想汽车续签长期供货协议

    Innovusion驶入持续增长快车道,消息称中国特供版英伟达 H20 AI 芯片推迟到明年一季度发布

      传感新品 【麻省理工学院:测试了一种新的可摄入传感器,从胃肠道内监测包括心率和呼吸模式在内的生命体征】 麻省理工学院的研究人员开发了一种可摄取的胶囊,可以从病人的胃肠道内监测包括心率和呼吸模式
    的头像 发表于 12-12 17:28 388次阅读
    Innovusion驶入持续增长快车道,消息称中国特供版英伟达 H20 AI 芯片推迟到明年一季度发布