0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

传感器融使用的关键技术

jf_C6sANWk1 来源:阿宝1990 作者:阿宝1990 2022-11-29 10:02 次阅读

1 传感器分类

配备高级驾驶辅助系统(ADAS)和自动驾驶汽车(AV)的车辆使用不同的传感器,如摄像头、雷达、激光雷达和超声波传感器,它们充当自动驾驶汽车(AV)的眼睛,帮助车辆感知周围环境,即人、物体、交通、道路几何形状、天气等。这种感知至关重要,它确保AV可以做出正确的决定,即停止,加速,转弯等。

随着自动驾驶达到更高的自主性水平,复杂性也大大增加。这里需要多个传感器来正确理解环境。但是每个传感器都是不同的,并且有其局限性,例如,相机可以很好地用于车道检测或物体分类。相比之下,雷达可以为远程检测或不同光线条件下提供良好的数据。如下表为不同传感器的检测能力的区分表:

能力 照相机 雷达 激光 雷达
远距离检测 中等 中等
不同的光照条件 中等
不同的天气条件(小雨、雾) 不好 不好
对象分类 不好
静止物体检测 不好

3925ec2e-6f82-11ed-8abf-dac502259ad0.png

2 传感器融合技术

使用传感器融合技术,来自多个传感器的数据被融合到自动驾驶汽车中,以提供最佳输入,以便自动驾驶汽车做出正确的决定(制动、加速转弯等)。

传感器融合提高了自动驾驶汽车的整体性能,并且有多种融合技术,使用哪一种取决于功能的操作设计域(ODD)。

ADAS利用环境感知技术将不同传感器采集到的外部环境数据进行融合处理,实现目标识别、轨迹预测和目标选择等功能。这些目标信息可以直接通过汽车总线发送给其它控制系统(助力转向系统、防抱死制动系统、车身控制系统等),由这些控制系统决定当前汽车状态;也可以交由ADAS控制器内的策略模块,这些策略模块结合目前的车辆运行状态,计算出减速、加速、增扭、减扭之类的控制命令,最后通过整车通信总线发送给不同的控制系统。基于开发成本的原因,第二种架构被广泛应用与整车控制系统中。

3995f744-6f82-11ed-8abf-dac502259ad0.png

根据传感器在数据融合中扮演的角色。融合分为数据级融合、特征级融合和决策级融合。在数据级融合中,传感器将采集的原始数据直接发送给控制器,控制器对这些数据进行同步、筛选、特征提取、数据聚类、目标轨迹预测、目标识别。其运算量大、实时性差、在硬件上需要更大的数据带宽才能应付多个传感器发送的数据。在特征级融合中,传感器数据处理器将传感器采集到的数据进行特征提取,之后将特征信息 (目标的横纵向加速度、间距等)发送给控制器,控制器再将这些特征信息进行融合。其优点在于降低了数据的发送量,减轻了控制器的处理负荷,提高了融合算法的实时性。但是仍然需要控制器内融合算法将目标最终识别。在决策级信息融合中,每个传感器通过数据处理器独立完成目标特征提取和目标识别。传感器数据处理器将识别出的目标信息发送给控制器,控制器根据不同的融合策略对传感器发送的目标进行筛选和最终归类。三种融合策略各有优缺点。数据级运算量大、实时性差,对于芯片的计算能力和数据传输带宽要求高,但所获得的传感器数据最完整;特征级能够有效提高数据融合的效率;决策级信息融合容错性好,实现难度低,但是信息损失大,而且对于传感器的依赖程度高。基于硬件资源和开发成本的考虑,基于特征级数据融合的架构被广泛使用于目前的ADAS中。具体如下图所示:

39bbe9cc-6f82-11ed-8abf-dac502259ad0.png

以下是不同类型的融合技术的几个示例,根据AV的自主级别,将使用一种或多种传感器融合技术,例如:对于2级的ADAS,需要对象检测,车道融合,交通标志融合,但对于3级及以上的ADAS,可能需要更多的融合技术。

3a47c7b2-6f82-11ed-8abf-dac502259ad0.png

环境和功能规范的复杂性决定了需要制定什么样的融合策略和什么样的融合需求。下图为雷达和相机融合的一些数据流程处理:

3a528f30-6f82-11ed-8abf-dac502259ad0.png

3 传感器融合面临的挑战

执行传感器融合是一项复杂的活动,应该考虑许多挑战:

不同的传感器以不同的采样率(50毫秒、60毫秒等)提供输出数据

传感器可能会从同一物体进行多次检测(例如:大型卡车可能会从雷达发出多次反射)

传感器还可以检测错误或遗漏检测(相机可能会错过夜间、黄昏时间等检测物体/车道)

物体可能在传感器的盲区停留一段时间,或者物体可能在盲区动态移动

不同FOV区域的不同传感器的输出精度也不同

传感器安装在车辆的不同位置

传感器性能在不同的环境条件下也有所不同

传感器的检测置信度可能较低随着高阶智驾的要求,可能需要多个传感器来尝试接近 360 度覆盖并避免盲点。传感器的放置对于减少盲区以在不影响安全要求的情况下实现最佳性能也至关重要,此外,每个传感器的精度水平都不同,管理每个传感器的数据精度对于最终输出至关重要。

为了确保传感器融合的高精度,必须确保正确的KPI和稳健的设计:确保所有高级别的关键绩效指标都到位,即

每个对象的单个轨道

无错误或遗漏对象检测

整体精度得到提高

为每个输出提供置信水平

估计传感器盲区的输出

通过设计实现更高的精度:

4 传感器融使用的关键技术

下面是一个传感器融合架构示例,可用于确保最高水平的对象检测精度。

3a75a4b6-6f82-11ed-8abf-dac502259ad0.png

数据同步:- 不同的传感器提供不同的输出,例如,相机在 50 毫秒时提供输出,雷达可以在 60 毫秒时提供输出。数据同步技术在执行传感器融合之前同步此数据。

坐标变换:- 这是一种基于传感器几何形状和放置的技术,可将安装在不同位置的传感器的数据转换到一个全局坐标系中。例如,如果我们考虑一辆长 5 米、宽 2 米的汽车与一辆长 18 米、宽 4 米的卡车,我们需要将数据带到后轴或前轴的中心点的全局坐标系中。

数据关联:这是一种技术,用于确保从车辆上的每个传感器接收的多个数据是针对同一物体的,例如,前方的汽车

状态估计和预测:估计状态。

轨道管理:轨道管理技术确保传感器融合的最终输出,它根据轨道历史初始化、维护和删除轨道,并计算轨道置信度。

自车运动估计:它考虑了车辆的运动。例如,以 T+100 毫秒和 T+200 毫秒接收数据,但在此期间车辆已经移动。该技术解释了车辆位置或运动的这种变化。

因此,为了实现传感器融合的高质量性能,必须考虑设计的一些关键方面:

数据关联和估计技术的算法选择

有许多算法可用于数据关联,流行的算法是最近邻、概率和联合概率数据关联技术。

运用各种技术,如线性卡尔曼滤波器,扩展卡尔曼滤波器,粒子滤波器等。

融合战略

数据关联算法和估计技术应根据用于融合的传感器类型、状态估计要求(动态/静态目标估计)和传感器输出来确定。

轨迹管理:为了减少错误输出,融合轨迹管理需要在初始化轨迹之前建立置信度,但是如果花费更多时间,则会导致延迟,这将延迟AD系统的操作,这对AD系统性能不利。轨道初始化策略应考虑操作环境、功能ODD等。曲目删除也是如此

滤波器调整滤波器调谐对滤波器性能非常关键。滤波器调整需要考虑实际方面,这可以通过使用真实世界数据的传感器表征来完成。

验证融合以确保软件质量和方案覆盖也很重要。但是,验证可能会导致数百万个场景,因此使用正确的验证策略来测试与模拟数据、真实世界数据或车辆测试中的融合始终很重要。以下是融合验证的关键方面

边缘情况场景选择:由于融合改善感知通过融合各种传感器噪声数据来提高性能,因此应仔细选择涵盖所有边缘情况的场景。该场景还应提及在模拟、真实世界或车辆中都需要哪个级别的验证。目标应该是在模拟级别上实现最大覆盖率,以减少成本和时间,同时测试质量不应有任何影响。

传感器建模:为了验证仿真中的融合与环境噪声效应,需要高保真传感器模型来模拟环境对传感器性能的影响。高保真传感器建模是研究课题,并且提出了各种技术,例如数据驱动模型或基于物理的建模。正确的传感器模型对于仿真至关重要。

使用真实世界数据进行验证:高保真传感器模型可以模拟精度高达90%至95%的环境条件,因此仿真中不可能涵盖所有场景,并且需要使用真实世界的数据进行融合验证。

车辆测试:融合的最终验证应在车辆上进行,以确保在考虑实际情况、传感器延迟和驱动延迟的情况下进行功能级别的端到端测试

因此,融合是AD性能非常关键的感知组件,必须考虑关键的实际方面,并为设计和验证定义正确的策略,以实现AD软件的最高成熟度。

审核编辑 :李倩

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2545

    文章

    50384

    浏览量

    750670
  • 激光雷达
    +关注

    关注

    967

    文章

    3907

    浏览量

    189324
  • 自动驾驶
    +关注

    关注

    782

    文章

    13596

    浏览量

    165851

原文标题:4 传感器融使用的关键技术

文章出处:【微信号:阿宝1990,微信公众号:阿宝1990】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    基于传感器的人机交互技术

    基于传感器的人机交互技术是现代科技发展的重要领域之一,它极大地推动了人机交互的便捷性、自然性和智能性。本文将详细探讨基于传感器的人机交互技术,包括其基本原理、
    的头像 发表于 07-17 16:52 582次阅读

    数据采集系统的组成、工作原理、关键技术和应用场景

    数据采集系统(Data Acquisition System,简称DAS)是一种用于收集、处理和存储数据的系统,广泛应用于工业、科研、医疗等领域。本文将详细介绍数据采集系统的组成、工作原理、关键技术
    的头像 发表于 07-01 15:39 4481次阅读

    智能制造的关键技术有哪些?

    制造模式。智能制造的关键技术主要包括以下几个方面: 工业物联网(Industrial Internet of Things,IIoT) 工业物联网是智能制造的基础,它通过将传感器、执行、控制
    的头像 发表于 06-07 15:30 1959次阅读

    霍尔电流传感器响应测试关键技术及测试指南

    汽车的动力“心脏”。因此,霍尔电流传感器的可靠性决定着电驱系统的技术水平。图1:电流传感器在新能源汽车中的应用随着科技的发展和进步,以及半导体技术和制备工艺的升级迭
    的头像 发表于 06-05 16:48 1434次阅读
    霍尔电流<b class='flag-5'>传感器</b>响应测试<b class='flag-5'>关键技术</b>及测试指南

    储能BMS的关键技术是什么

    组成部分,其关键技术对于提高储能系统的安全性、经济性和可靠性具有重要意义。本文将深入探讨储能BMS的关键技术,以期为相关研究和应用提供参考。
    的头像 发表于 05-17 15:28 585次阅读

    M8连接6芯的关键技术参数是什么

      德索工程师说道M8连接6芯,作为一种高性能的电气连接解决方案,广泛应用于工业自动化、传感器技术、通信设备、医疗设备以及航空航天等领域。为了确保连接在这些
    的头像 发表于 04-30 17:31 876次阅读
    M8连接<b class='flag-5'>器</b>6芯的<b class='flag-5'>关键技术</b>参数是什么

    EMI滤波:工业应用的关键技术与性能优势?

    EMI滤波:工业应用的关键技术与性能优势?|深圳比创达电子
    的头像 发表于 03-05 10:12 446次阅读
    EMI滤波<b class='flag-5'>器</b>:工业应用的<b class='flag-5'>关键技术</b>与性能优势?

    光伏逆变器拓扑概述及关键技术

    光伏逆变器拓扑概述及关键技术
    的头像 发表于 02-21 09:47 679次阅读
    光伏逆变器拓扑概述及<b class='flag-5'>关键技术</b>

    共进微和西安电子科大共建&quot;传感器与汽车电子封测关键技术联合实验室&quot;正式揭牌

    2024年1月19日,共进微电子和西安电子科技大学共建的"传感器与汽车电子封测关键技术联合实验室"正式揭牌,该实验室旨在促进封测领域的科研合作,推动封测技术的创新和产业的发展。同时,西安电子科技
    的头像 发表于 01-26 08:46 215次阅读
    共进微和西安电子科大共建&quot;<b class='flag-5'>传感器</b>与汽车电子封测<b class='flag-5'>关键技术</b>联合实验室&quot;正式揭牌

    常见的传感器技术汇总简介

    传感器技术是现代信息技术关键组成部分之一,涉及到物理学、化学、生物学等多个学科领域,其应用范围广泛,包括工业自动化、环境监测、医疗保健、智能家居等领域。下面将介绍一些常见的
    的头像 发表于 01-12 14:05 1004次阅读

    人形机器人柔性触觉传感器关键技术分析

    内部传感器主要用于监测机器人的内部状态,如位置、速度和加速度,而外部传感器则专注于捕捉距离、声音、光线和触觉等机器人外部环境的信息。
    发表于 01-02 14:22 2538次阅读
    人形机器人柔性触觉<b class='flag-5'>传感器</b>的<b class='flag-5'>关键技术</b>分析

    隧道气体检测传感器:确保行车安全的关键技术

    引言:【云南恩田智能】 隧道是现代交通网络的重要组成部分,然而,隧道中的气体状况可能对行车安全构成威胁。随着技术的发展,隧道气体检测传感器应运而生,成为确保隧道内空气质量的重要装置。本文将介绍隧道
    的头像 发表于 12-28 17:26 610次阅读
    隧道气体检测<b class='flag-5'>传感器</b>:确保行车安全的<b class='flag-5'>关键技术</b>

    CYX20差压传感器:精准测量压力差的关键技术

    随着科技的不断发展,压力传感器作为一种关键的感知技术,已经在各个领域展现出了其强大的应用价值。
    的头像 发表于 12-09 17:48 1125次阅读

    物联网关键技术和应用

    电子发烧友网站提供《物联网关键技术和应用.pdf》资料免费下载
    发表于 11-28 10:37 1次下载
    物联网<b class='flag-5'>关键技术</b>和应用

    一文看懂传感器国内外发展历程与现状

    在保护美国武器系统质量优势的关键技术中,有八项是被动传感器。2000年,美国空军列举了15项有助于提高21世纪空军能力的关键技术,其中传感器技术
    发表于 11-22 15:31 5972次阅读
    一文看懂<b class='flag-5'>传感器</b>国内外发展历程与现状