0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

自动驾驶迈向3.0时代!车企争抢城市无图NOA,大模型端到端方案加速迭代

Monika观察 来源:电子发烧友 作者:莫婷婷 2024-06-08 00:06 次阅读

电子发烧友网报道(文/莫婷婷)汽车智能化推动了“软件定义汽车”,自动驾驶也同步进入了由软件驱动的2.0时代。发展至今,自动驾驶市场开始迈进3.0时代。那么,什么是自动驾驶3.0时代,在2.0时代向3.0时代的过渡阶段,大模型又有哪些需求?

自动驾驶由2.0时代迈向3.0时代

回顾自动驾驶的发展,可以将其总结为三个发展阶段,由硬件驱动转向软件驱动,如今转向数据驱动,也就是业内所说的自动驾驶3.0时代。在硬件驱动的1.0时代,由激光雷达负责感知,到了软件驱动的2.0时代,感知由传感器单独输出结果,应用了部分小模型,数据量较少。如今在3.0时代,感知由多模态传感器联合输出结果,数据的需求量越来越大,应用了越来越多的大模型。

毫无疑问,大模型正在重塑汽车智能化技术路线,当前进入了自动驾驶2.0时代向3.0时代的技术架构演进的关键阶段。毫末智行认为,在这个过程中,越来越多的分模块出现集中化、模型化,也就是由多个模块变成一个模型,由多个模型变成一个模型,最后会汇聚到这种端到端的大模型,通过端到端的大模型在车上或者在云上完成智能驾驶任务。

当前,有多家厂商发布了应用在汽车领域的大模型及其解决方案,例如毫末智行基于自身对技术发展的预判,发布了Drive GPT大模型,商汤绝影则发布了端到端自动驾驶解决方案UniAD等。

不同的企业对自动驾驶任务的定义是不同的。毫末智行将自动驾驶任务分成了两个阶段,一个是感知阶段,另一个是认知阶段。Drive GPT大模型在感知阶段进行传感器的多模态视觉融合,完成感知后,认知大模型再进行理解,认知模型除了输入自动驾驶所需要的目的地、导航信息,还可以用基础大语言模型,对驾驶环境做理解,从而对驾驶的策略进行预测。商汤绝影智能驾驶产品总监赵祥磊表示,Drive GPT还加入了图片、文字等多模态模型,能够更加高效、立体地理解、感知周围的环境。

要知道,智能汽车在驾驶过程中面临很多复杂的场景,例如能否根据道路的环境控制车速,让行驶更安全。因此大模型需要更精准地完成检测工作,这也就需要通过大量数据的训练。
在云端完成感知大模型和认知大模型的能力提升之后,如何将其赋能至车端,是下一个阶段需要突破的难题。


自动驾驶解决方案走向真端到端,由两段式到一段式

目前,大模型上车已经迎来一定进展,并且随着技术的成熟,NOA功能从高速NOA,卷向城市NOA,再到城市无图NOA。2024年,正是城市无图NOA落地的关键节点。

“图”指的是高精度地图,有图意味着需要高精度地图提供交通标志、红绿灯等道路信息,并且要精确到厘米,让车辆进行更加有效的路线规划和智驾行为。但高精度地图存在制作成本高、需要及时更新地图信息、信息采集法规严格等问题。因此,城市无图NOA已经成为下一阶段的技术需求。更重要的是,城市无图NOA还是大模型是否真的支持端到端的标志之一,这也是为什么在现阶段大模型厂商经常提及“端到端”的原因。

在车企中,智己汽车发布的 D.L.P.(深度学习算法人工智能模型,DDLD+DDOD融合感知大模型也已上车智己L6。智己汽车表示智己L6 Max全系具备无图城市NOA能力。计划在第一季度在上海地区率先推送城市NOA,第二季度开启无图城市NOA公测,第三季度量产无图城市NOA,第四季度实现全国都可开无图城市NOA。

10 年前的 ADAS 功能主要是识别车辆、行人和车道线,让汽车居中行驶。随着技术迭代,增加了响应红绿灯的功能,再接下来,ADAS功能还需要识别更多复杂的道路信息,例如路上的施工区域,让汽车能够绕过障碍物更安全行驶。

商汤绝影智能驾驶产品线总监赵祥磊提及,后面我们发现它要的并不是找一个可通行的空间,而是要去理解这是一个施工的场景,可能需要去左转、右转甚至掉头,这也是我们的理解,我们认为最终的端到端方案,它可能并不是一个感知和决策规划两段式的方案,真端到端应该是一段式的,这样的话它的性能的天花板才会更高。

商汤绝影认为由感知和决策两个模型组成的 “两段式”架构的端到端方案比较容易落地,但存在性能上限瓶颈,因为中间信息的传递主要是人为的,会出现信息传递过滤或丢失的问题。

因此商汤绝影推出UniAD解决方案,公司表示这是真端到端的解决方案,实现了感知决策一体化。具备两大优势,一是性能上限更高,应对非结构化无图道路和多交通参与者交互等复杂能力更强;二是迭代速度更快,针对复杂道路场景,相比于基于规则方案,开发效率提高数倍。目前已经完成实车部署开始路测。

商汤绝影采用了数据驱动、大模型驱动让UniAD更高效地响应复杂道路场景。但是商汤绝影发现,当随着时间周期越来越长,corner case出现概率也在降低,基于车辆采集的数据综合效率逐渐降低。此时需要寻找新的数据驱动引擎。而AIGC的出现恰好能解决一部分问题,大模型能够生成交通事故等长尾场景的数据,再进行训练。

在毫末智行的自动驾驶技术路线中,也规划了将在今年实现通用感知+通用认知,以及端到端训练,打造感知+认知端到端。

当然,端到端的模型开发、基于大模型的数据生成,都是需要算力基础设施作为支撑。算力基础设备的算力规模或许会成为下一阶段大模型厂商的竞争优势。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 自动驾驶
    +关注

    关注

    776

    文章

    13247

    浏览量

    164142
  • 大模型
    +关注

    关注

    2

    文章

    1883

    浏览量

    1504
收藏 人收藏

    评论

    相关推荐

    惠尔智能完成A轮融资,加速自动驾驶技术全球布局

    深圳市惠尔智能有限公司近日成功完成数千万元的A轮融资,为公司自动驾驶技术的研发和产品迭代注入了强劲动力。本轮资金将主要用于自动驾驶技术的深度研发、产品迭代以及海外市场的积极拓展。
    的头像 发表于 06-11 10:38 327次阅读

    智能驾驶模型:有望显著提升自动驾驶系统的性能和鲁棒性

    智能驾驶模型是近年来人工智能领域和自动驾驶领域最为前沿的研究方向之一,它融合了深度学习、多模态融合、世界模型构建等多种技术,有望显著提升自动驾驶
    的头像 发表于 05-07 17:20 982次阅读
    智能<b class='flag-5'>驾驶</b>大<b class='flag-5'>模型</b>:有望显著提升<b class='flag-5'>自动驾驶</b>系统的性能和鲁棒性

    未来已来,多传感器融合感知是自动驾驶破局的关键

    巨大的进展;自动驾驶开始摒弃手动编码规则和机器学习模型的方法,转向全面采用的神经网络AI系统,它能模仿学习人类司机的
    发表于 04-11 10:26

    地平线开启港交所IPO,加速高阶自动驾驶新征程

    据港交所披露,智能驾驶科技领军企业地平线已正式启动IPO上市进程,旨在借助资本市场力量,提升创新实力,推动中国智能汽车迈向高阶自动驾驶新篇章。
    的头像 发表于 03-27 16:27 546次阅读

    自动驾驶已成现实?赛思时间同步服务器赋能北京市高级别自动驾驶示范区,为自动驾驶提供中国方案

    赛思时间同步服务器赋能全球首个“车路云一体化”高级别自动驾驶示范区,为自动驾驶提供中国方案!北京市高级别自动驾驶示范区的“中枢神经”-云控基础平台北京市高级别
    的头像 发表于 03-22 09:30 792次阅读
    <b class='flag-5'>自动驾驶</b>已成现实?赛思时间同步服务器赋能北京市高级别<b class='flag-5'>自动驾驶</b>示范区,为<b class='flag-5'>自动驾驶</b>提供中国<b class='flag-5'>方案</b>

    自动驾驶发展问题及解决方案浅析

    随着科技的飞速进步,自动驾驶汽车已经从科幻概念逐渐转变为现实。然而,在其蓬勃发展的背后,自动驾驶汽车仍面临一系列亟待解决的问题和挑战。本文将对这些问题进行深入的剖析,并提出相应的解决方案,以期为未来
    的头像 发表于 03-14 08:38 498次阅读

    自动驾驶地图研究:SD pro MAP快速上车,助力城市NOA轻地图智驾方案

    自动驾驶的发展进程看,一段时间内将持续处于人机共驾阶段,这个阶段对地图的需求并不一定是要高精度地图,针对不同地图互补特性整合的多源地图可能更适合该阶段的自动驾驶需求。
    的头像 发表于 01-04 16:09 664次阅读
    <b class='flag-5'>自动驾驶</b>地图研究:SD pro MAP快速上车,助力<b class='flag-5'>城市</b><b class='flag-5'>NOA</b>轻地图智驾<b class='flag-5'>方案</b>

    LabVIEW开发自动驾驶的双目测距系统

    LabVIEW开发自动驾驶的双目测距系统 随着车辆驾驶技术的不断发展,自动驾驶技术正日益成为现实。从L2级别的辅助驾驶技术L3级别的受条件
    发表于 12-19 18:02

    成都汇阳投资关于巨头入局自动驾驶,国内产业链迎发展!

    【巨头入局赋能智能驾驶自动驾驶迎行业奇点】 2023年多家车企巨头升级智驾系统,推出城市 NOA 功能,向 L3 等级自动驾驶持续推进。
    的头像 发表于 11-23 09:55 492次阅读
    成都汇阳投资关于巨头入局<b class='flag-5'>自动驾驶</b>,国内产业链迎发展!

    激光雷达如何加速赋能城市NOA功能落地?

    2023 年 11 月 4 号,“激光雷达助力城市 NOA 驶入量产快车道”技术分享会在禾赛麦克斯韦智造中心举办。禾赛战略负责人施叶舟、轻舟智航产品负责人许诺,与行业媒体专家、先锋用户等,一起就激光雷达如何加速赋能
    的头像 发表于 11-09 10:14 452次阅读
    激光雷达如何<b class='flag-5'>加速</b>赋能<b class='flag-5'>城市</b><b class='flag-5'>NOA</b>功能落地?

    农机自动驾驶显示系统组成部分以及配置

    随着科技的发展,传统的农机行业正趋于饱和,新生事物层出不穷,无论是传统农机还是从业者都面临如何转型升级的问题。农机自动驾驶系统就是当下最热的概念之一。身为新时代农机人,作业的提质增效是无论如何也绕
    发表于 10-17 17:52

    【KV260视觉入门套件试用体验】八、VITis AI自动驾驶多任务执行MultiTask V3

    是一种模型,旨在同时执行自动驾驶场景中的不同任务,同时实现优异的性能和效率。这些任务包括对象检测、分割、车道检测、可行驶区域分割和深度估算,这些都是自动驾驶感知模块的重要组成部分。 三、代码实现
    发表于 09-26 16:43

    华为盘古大模型如何赋能自动驾驶

    华为盘古大模型如何赋能自动驾驶?  随着智能时代的到来,自动驾驶已成为许多汽车制造商和科技公司的追求,华为作为智能时代的领导者之一,自然也积
    的头像 发表于 08-31 10:18 1623次阅读

    城市自动辅助导航驾驶加速落地 智能驾驶元年开启

    正因如此,在发力城市NOA的过程中,越来越多的车企采取了“去高精度地图”的模式。日前,理想汽车向多家媒体展示了公司新推出的城市NOA内测版本。据悉,理想的
    的头像 发表于 07-12 15:50 477次阅读

    工程能力是关键,自动驾驶无图方案加速进入前装量产

    电子发烧友网报道(文/梁浩斌)自动驾驶商业化的进度正在加速,最近工业和信息化部副部长辛国斌在国务院政策例行吹风会上表示,将深化智能网联汽车测试示范应用,支持有条件的自动驾驶,包括L3级及更高
    的头像 发表于 07-03 07:42 934次阅读
    工程能力是关键,<b class='flag-5'>自动驾驶</b>无图<b class='flag-5'>方案</b><b class='flag-5'>加速</b>进入前装量产