0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

多传感器融合技术的应用方案

双目立体视觉 来源:双目立体视觉 作者:双目立体视觉 2022-03-25 15:40 次阅读

“INDEMIND:随着机器人的应用领域不断拓展,对机器人的环境感知能力的要求也在不断提升,而要解决环境感知问题,传感器技术则是最重要的应用支撑技术之一,它对于机器人的意义亦如人眼对于人,但与人眼不同的是,它的构成主要由传感器和算法组成,并伴随着机器人发展,已从单传感器向多传感器融合迭代。”

由于机器人不断渗透到各行各业,面对的外部环境越来越复杂,对机器人的精度、稳定性、智能化提出了新的要求,而单传感器或采用多个(种)传感器却仅是从多个侧面孤立地获取目标信息的方式,前者不仅效率较低下,且获取的信息量有限,而后者不断增加传感器的做法,更会增加系统的复杂度,对平台算力要求提高,且割断了各传感器信息间的内在联系,丢失了信息经有机组合后可能蕴含的深层有效信息,造成信息资源浪费,甚至可能导致决策失误。

在多重因素影响下,发展多传感器融合技术便表现出了它的必然性。事实上,多传感器融合技术从字面上可知并非另辟蹊径,而是在采用多个(种)传感器的基础上,进一步开拓和完善而来,原理是借助算法对感知相关要素信息的冗余或互补信息进行分析、建模、解算、融合、估计和补偿,最终输出更为准确、丰富、可靠的信息。

多传感器融合技术的应用,对于系统的容错能力、信息精度、信息的可信度&丰富度都有了明显提升,这对于机器人的意义无比重要。目前,市面上多传感器融合技术多是以激光雷达为主导的技术方案,并根据架构组成,又主要分为两种。

一种是以单线激光雷达主导+IMU+里程计或其它传感器的融合方案,采用松/紧耦合方式,有着简单、成熟的技术优势,是市面上较为常见的融合技术方案,然而这类方案的缺点在于,一是环境适应能力较差,对于环境特征单一的长走廊等场景,误差较高,容易偏离路径,二是重定位能力差,运行过程中一旦丢失位置,难以重新定位。

另一种是以多线激光雷达为主导的融合方案,与其它传感器采用松/紧耦合方式组合,得益于多线激光雷达,可获取到环境物体的三维信息,使得这类方案的环境感知能力得到显著提升,且在功能表现上,同样有着激光雷达精度高和稳定性高的特点,然而需要提到的是,多线激光雷达在保留了传统优势的同时,也有着激光雷达类似的局限性,且一旦出现故障,会导致整个系统宕机,目前这类方案主要应用于大多数商用机器人,不过其高昂的成本也让大多数企业难以承受。

因此,在此背景下,行业一方面在进一步完善激光雷达方案的同时,另一方面也在探索视觉方案。目前,以视觉为主导的融合技术方案,在市面上虽然还相对较少,但随着计算机视觉技术多年来的发展,已经有了成熟方案,INDEMIND的多传感器融合技术便是其中之一。

与激光雷达方案不同,INDEMIND多传感器融合技术在实现上,设计了以视觉传感器为主导的标准化、模块化的多传感器融合架构,通过遵循INDEMIND的标准定义接口,可快速加入IMU、里程计、激光、GNSS等多种传感器,实现“积木式”加装,结合双目立体视觉技术,能够实现高精度、高稳定性、低成本的3D环境感知,走出了不同于激光雷达方案的All IN ONE新路径。

众多周知,信息量丰富是视觉的优势,但也导致对算力要求的大幅提升。由于需要处理的环境信息量巨大,对于平台的算力要求极高,同时视觉受环境光线影响严重,如何解决这些难题,是走通视觉方案的关键。

因此,INDEMIND在研发过程中,对它们进行了长期针对性解决。

• 降低算力要求

算法&硬件优化:采用增量优化的方式,分段处理,并在区段间建立先验信息,有效降低了平台计算压力,提高计算效率。

硬件加速:在硬件上,对于视觉处理采用neon加速、GPU加速、DSP加速等方式,提升计算性能,降低算力要求。

• 提高性能

传感器更丰富:基于INDEMIND多传感器融合架构,可融合超过4种以上的传感器,通过紧耦合方式组合,对于环境的容忍度更高,能够保障在部分传感器出现异常的同时,系统仍能保持正常运行,提高鲁棒性。

误差补偿:为了提升精度,INDEMIND对系统中的视觉、IMU、里程计等每个传感器都进行了实时误差建模、估计及补偿,能够有效保障在实时运行过程中的精度和稳定性。

野值判定与剔除:由于传感器较多,视觉、激光、里程计、IMU等不同传感器产生的噪点,对于系统的稳定性和精度影响较大,因此,INDEMIND对于各个传感器的数据,进行了野值判定及剔除,进一步增进系统对于原始传感器数据的容错能力,提升最终的稳定性和精度。

与此同时,基于INDEMIND立体视觉技术,可获取丰富的3D环境信息,配合上层决策,对于实现智能避障、路径规划、人机交互提供了必要的前提条件。

目前,经过长期验证,搭载INDEMIND多传感器融合技术的测试机器人,定位精度可达厘米级,<5cm(RMS),达到激光融合方案的同等精度水平。在智能避障方面,能够实现三维立体避障,精度<1%,结合INDEMIND智能决策引擎技术,可实现策略化避障,提升安全决策水平。同时,在交互方面,基于智能决策引擎技术,能够根据指令实现目标跟踪、指定区域作业等多种个性化功能,提升机器人人机、物机交互能力。

审核编辑:汤梓红

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2550

    文章

    51035

    浏览量

    753078
  • 测试
    +关注

    关注

    8

    文章

    5269

    浏览量

    126599
  • 机器人
    +关注

    关注

    211

    文章

    28380

    浏览量

    206918
收藏 人收藏

    评论

    相关推荐

    雨量水位数据采集终端机RTU:传感器融合,水文监测数据远程查看

    传感器融合的雨量水位数据采集终端机RTU,正以其卓越的性能和全面的数据采集能力,成为水文监测领域的得力助手。让我们共同迎接精准监测的新时代,为保护水资源、保障人民生命财产安全贡献力量。
    的头像 发表于 12-13 09:49 104次阅读
    雨量水位数据采集终端机RTU:<b class='flag-5'>多</b><b class='flag-5'>传感器</b><b class='flag-5'>融合</b>,水文监测数据远程查看

    传感器融合在自动驾驶中的应用趋势探究

    自动驾驶技术的快速发展加速交通行业变革,为实现车辆自动驾驶,需要车辆对复杂动态环境做出准确、高效的响应,而传感器融合技术为提升自动驾驶系统
    的头像 发表于 12-05 09:06 281次阅读
    <b class='flag-5'>多</b><b class='flag-5'>传感器</b><b class='flag-5'>融合</b>在自动驾驶中的应用趋势探究

    智能马桶脚感方案 TOF传感器选型推荐

    目前正在开发一个智能马桶脚感方案,TOF传感器选型遇到难题了,要么成本高,要么技术难啃,有没有技术大神可以帮助下啊。
    发表于 11-22 09:37

    蓝牙数据模块连接方案传感器更加智能

    与管理,成为了一个亟待解决的难题。蓝牙技术,尤其是其连接方案,正逐步成为解决这一挑战的关键,以下安朔科技为大家介绍一下传感器蓝牙模组连接
    的头像 发表于 08-15 16:47 688次阅读
    蓝牙数据模块<b class='flag-5'>多</b>连接<b class='flag-5'>方案</b>让<b class='flag-5'>传感器</b>更加智能

    基于物理参数数据融合和先进人工智能算法的锂电池热失控监测传感器

    基于物理参数数据融合和先进人工智能算法的锂电池热失控监测传感器是多种方案中的优选项!是一种快速、准确、可靠、应用广泛的传感
    的头像 发表于 06-18 17:19 786次阅读
    基于<b class='flag-5'>多</b>物理参数数据<b class='flag-5'>融合</b>和先进人工智能算法的锂电池热失控监测<b class='flag-5'>传感器</b>

    传感器融合如何使 AMR 在工厂车间内高效移动

    依赖单一传感器技术传感器融合,或简称“传感器融合
    的头像 发表于 05-05 09:34 808次阅读
    <b class='flag-5'>传感器</b><b class='flag-5'>融合</b>如何使 AMR 在工厂车间内高效移动

    感科技携自研的光学传感器芯片及产品亮相深圳传感器展览会

    4月14日-16日,感科技携自主研发的光学传感器芯片及应用产品展示套件参展深圳传感器展览会,此次参展不仅是对感科技光学传感器芯片
    的头像 发表于 04-19 09:10 598次阅读

    未来已来,传感器融合感知是自动驾驶破局的关键

    驾驶的关键的是具备人类的感知能力,传感器融合感知正是自动驾驶破局的关键。昱感微的雷视一体传感器融合
    发表于 04-11 10:26

    智慧灯杆合一传感器(创新设计,实现多功能融合

      智慧灯杆合一传感器的最大特点就是创新的设计,将多种功能集成在一个灯杆上。它不仅仅能够提供照明服务,还能够实时监测空气质量、温度、湿度等环境数据,甚至能够感知人流、车流等信息。这种多功能融合的设计,使得城市管理者可以更加方便
    的头像 发表于 03-29 15:25 364次阅读

    区飞行时间(ToF)传感器的特点

    ‍‍‍‍‍‍‍‍ VL53L5、VL53L7、VL53L8都是基于ST的FlightSense技术区飞行时间(ToF)传感器
    的头像 发表于 02-25 09:41 1134次阅读
    <b class='flag-5'>多</b>区飞行时间(ToF)<b class='flag-5'>传感器</b>的特点

    深度解析:传感器融合SLAM技术全景剖析

    SLAM中,先验值通常从一系列传感器获得,比如惯性测量单元(IMU)和编码,而观测值则是通过GPS、相机和激光雷达等其他传感器获取的,后验值是融合了先验信息与观测数据之后得到的结果,
    发表于 02-23 11:31 2995次阅读
    深度解析:<b class='flag-5'>多</b><b class='flag-5'>传感器</b><b class='flag-5'>融合</b>SLAM<b class='flag-5'>技术</b>全景剖析

    镜头传感器图像视频处理应用

    镜头传感器系统(MESS,Multi-CameraMulti-SensorSystems)在许多领域和场合都有广泛的应用。这些系统能够通过整合多个镜头和传感器的数据,提供更全面、准
    的头像 发表于 01-26 08:31 667次阅读
    <b class='flag-5'>多</b>镜头<b class='flag-5'>多</b><b class='flag-5'>传感器</b>图像视频处理<b class='flag-5'>器</b>应用

    康谋技术 | 自动驾驶传感器数据融合方法

    近年来,深度学习技术在涉及高维非结构化数据领域展现出了最先进的性能,如计算机视觉、语音、自然语言处理等方面,并且开始涉及更大、更复杂的模态信息问题。 不同传感器在进行同一实验任务时,针对产生的同一
    的头像 发表于 01-24 18:02 575次阅读
    康谋<b class='flag-5'>技术</b> | 自动驾驶<b class='flag-5'>多</b><b class='flag-5'>传感器</b>数据<b class='flag-5'>融合</b>方法

    Spring Boot和飞腾派融合构建的农业物联网系统-改进自适应加权融合算法

    接上集: 上次实验我们已经完成传感器融合算法的设计,本次实验注意完成改进自适应加权融合算法设计。 一、背景 通过利用温室控制系统来管理温室内的各种设备并控制温度、湿度,可以更好地探索
    发表于 01-06 12:18

    【飞腾派4G版免费试用】Spring Boot和飞腾派融合构建的农业物联网系统-数据融合算法篇

    ,在农田中使用传感器融合检测将会是一个很好的方案。 二、理论依据 由于自适应加权融合算法在实际应用中具有
    发表于 12-26 20:59