0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

SLAM成为应用传感器融合的绝佳示例

CEVA 来源:CEVA 作者:CEVA 2022-04-01 10:18 次阅读

众所周知,传感器在配合使用时效果最佳。对于同步定位与地图构建 (SLAM) 来说更是如此。SLAM 在 AR/VR 领域扮演着重要的角色,可以根据用户的姿势调整场景,避免无人机机器人这样的应用在使用过程中的碰撞,用途广泛。SLAM市场预计到2023年将增长至4.65亿美元,年复合增长率为36%,为大多数开发者提供了绝佳机遇。

手机上将 SLAM 应用于室内导航可能会在规模庞大的基础平台市场中占据主导地位。GPS 不能在室内工作,基于信标的导航只能在具有信标基础设施的区域工作。而 SLAM 则可以在任何提供室内地图的地方工作,符合大多数楼宇自控管理系统的低成本期望。将该区域的场景与用户在该区域行走时的姿势和运动融合到了一起,使得在此处应用 SLAM 成为了应用传感器融合的绝佳示例。

开箱即用的方案

我将首先描述如何在我们的 CEVA SensPro Sensor Hub DSP 硬件的基础上,结合我们的 SLAM 和 MotionEngine 软件模块,集成并测试这个解决方案,以调节和管理运动输入。我们需要一个摄像头和惯性测量传感器,一个 CPU 和 DSP 。我们将 CPU 用来承载MotionEngine 和 SLAM 框架,并用 DSP 来执行 SLAM 算法来减轻任务负担。

为了更简单的解释,我将首先从 OrbSLAM 算法开始,这是一种广泛使用的执行开放源代码的算法。它将执行三个主要功能。跟踪做(视觉的)逐帧注册,并在当前地图上定位新的帧。构图将点添加到地图,并通过创建和求解一组复杂的线性方程进行局部优化。循环闭合通过在返回到曾经到达过的点上进行修正来进行全局优化。这是通过求解一组大型线性方程式来实现的。

其中一些功能可以非常有效地运行在CPU内核的主机应用程序内,同时还有你的应用程序所特有的控制和管理功能。某些功能必须在 DSP 处理器中运行才实用或获得竞争优势。例如,跟踪在可能在CPU 中管理 1 帧/秒 (fps),其中特征提取占算法运行时间的 40%。相比之下,DSP 实现可管理 30帧/秒 (fps),这种分辨率对于视频和 IMU 之间的细粒度关联非常重要。

这种优势的原因很容易理解。DSP 实现提供了非常高的并行处理能力,提供定点数/浮点数支持,这在跟踪和求解线性方程中至关重要。此外,还有一个特殊指令集来加速特征提取。主机和 DSP 之间的简单链接可以将 DSP 看作加速器,从而将密集型计算分流到 SensPro。

视觉融合 IMU

我们提供了两个关键组件:使用 CEVA-SLAM SDK 产品的视觉SLAM 和 CEVA MotionEngine 软件,该软件可以非常精确地处理六个自由度中的三个自由度的IMU输入。IMU 和视频信息的融合取决于迭代算法,该算法通常是根据应用要求定制的。最后一步将视觉数据与运动数据联系起来,以生成精确的定位和映射估计值。 CEVA 提供成熟的视觉SLAM 和 IMU MotionEngine软件作为开发融合算法的坚实基础。构成这样的算法密集型功能将在DSP上运行最快,比如我们的SensPro2平台。

测试原型

构建原型平台后,将如何去测试?有多个 SLAM 数据集可用。Kitti 就是其中一个,EuroC 是另一个。在下面的例子中,我展示了 OpenCV 的实现与我们的 CEVA-SLAM SDK 实现的精度比较。您会想对您的产品做类似的分析。

融合您自己的方法

正如我前面提到的,构建 SLAM 平台有许多方法。也许您不想从 OrbSLAM 开始,或者您想融合自研的算法或是差异化的算法。SensPro Sensor Hub DSP 均可支持。

原文标题:CEVA凭借SensPro Sensor Hub DSP协助客户有效实现传感器融合

文章出处:【微信公众号:CEVA】欢迎添加关注!文章转载请注明出处。

审核编辑:汤梓红

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2550

    文章

    51056

    浏览量

    753264
  • CEVA
    +关注

    关注

    1

    文章

    177

    浏览量

    75934
  • SLAM
    +关注

    关注

    23

    文章

    423

    浏览量

    31825

原文标题:CEVA凭借SensPro Sensor Hub DSP协助客户有效实现传感器融合

文章出处:【微信号:CEVA-IP,微信公众号:CEVA】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    传感器融合在自动驾驶中的应用趋势探究

    自动驾驶技术的快速发展加速交通行业变革,为实现车辆自动驾驶,需要车辆对复杂动态环境做出准确、高效的响应,而多传感器融合技术为提升自动驾驶系统的稳定性和安全性提供了关键支持。通过将不同种类的传感器数据
    的头像 发表于 12-05 09:06 300次阅读
    多<b class='flag-5'>传感器</b><b class='flag-5'>融合</b>在自动驾驶中的应用趋势探究

    光纤光栅传感器:精准测量与监测的科技先锋

    在科技日新月异的今天,光纤光栅传感器凭借其卓越的性能和广泛的应用前景,已成为精准测量与监测领域的重要力量。光纤光栅传感器,简单来说,是利用光纤中的光栅结构来感知外界环境变化的一种传感器
    的头像 发表于 11-18 08:57 219次阅读

    最新图优化框架,全面提升SLAM定位精度

    同时定位与地图构建(SLAM)是一项关键技术,允许移动机器人在部分或完全未知的环境中自主导航。它包括使用机载传感器同时估计机器人状态和构建传感器检测到的环境地图。SLAM可以根据
    的头像 发表于 11-12 11:26 345次阅读
    最新图优化框架,全面提升<b class='flag-5'>SLAM</b>定位精度

    激光雷达在SLAM算法中的应用综述

    SLAM算法运行的重要传感器。基于激光雷达的SLAM算法,对激光雷达SLAM总体框架进行介绍,详细阐述前端里程计、后端优化、回环检测、地图构建模块的作用并总结所使用的算法;按由2D到
    的头像 发表于 11-12 10:30 532次阅读
    激光雷达在<b class='flag-5'>SLAM</b>算法中的应用综述

    MG-SLAM融合结构化线特征优化高斯SLAM算法

    信息和提供准确的全局重建方面表现出显著的进步,而传统系统则基于稀疏点云或体素。然而,NeRF 方法仍然存在过度平滑、场景表示受限和计算效率低下等缺点。最近,基于高斯的 SLAM成为一种利用体积辐射场
    的头像 发表于 11-11 16:17 281次阅读
    MG-<b class='flag-5'>SLAM</b>:<b class='flag-5'>融合</b>结构化线特征优化高斯<b class='flag-5'>SLAM</b>算法

    采用MSP430微控制的RF430FRL152H NFC传感器标签应用示例

    电子发烧友网站提供《采用MSP430微控制的RF430FRL152H NFC传感器标签应用示例.pdf》资料免费下载
    发表于 10-26 11:04 0次下载
    采用MSP430微控制<b class='flag-5'>器</b>的RF430FRL152H NFC<b class='flag-5'>传感器</b>标签应用<b class='flag-5'>示例</b>

    从算法角度看 SLAM(第 2 部分)

    无迹卡尔曼滤波 (UKF) 等概率滤波,来递归估计机器人的状态并根据传感器测量值更新地图。该滤波根据机
    的头像 发表于 10-02 16:39 310次阅读
    从算法角度看 <b class='flag-5'>SLAM</b>(第 2 部分)

    精密制造的革新:光谱共焦传感器与工业视觉相机的融合

    在现代精密制造领域,对微小尺寸、高精度产品的检测需求日益迫切。光谱共焦传感器凭借其非接触、高精度测量特性脱颖而出,而工业视觉相机则以其高分辨率、实时成像能力著称。两者的融合,不仅解决了传统检测方式在
    的头像 发表于 09-26 11:47 330次阅读

    光电传感器/红外传感器

    刚入职了一家做传感器公司,老板让我自己学习成为一名研发人员,试用期三个月,让我开发出一款红外传感器。基本上什么资料都没有,让我自己去网上找,之前产品的原理图也没有,现在感觉两眼摸黑,有没有大佬可以告知一下我的学习方向吗,关于设计
    发表于 05-30 17:58

    传感器融合如何使 AMR 在工厂车间内高效移动

    依赖单一传感器技术。 多传感器融合,或简称“传感器融合”,将激光测距 (LIDAR)、摄像头、超声波传感
    的头像 发表于 05-05 09:34 812次阅读
    <b class='flag-5'>传感器</b><b class='flag-5'>融合</b>如何使 AMR 在工厂车间内高效移动

    锐思智芯将出席2024全球CMOS传感器应用技术峰会

    4月17日,由潮电智库和深圳市摄像头行业协会主办的2024全球CMOS传感器应用技术峰会将在深圳举行,锐思智芯高级研发副总裁谌黎明女士受邀出席本次活动,将发表“HVS融合视觉传感技术简介及应用
    的头像 发表于 04-15 14:07 661次阅读
    锐思智芯将出席2024全球CMOS<b class='flag-5'>传感器</b>应用技术峰会

    未来已来,多传感器融合感知是自动驾驶破局的关键

    驾驶的关键的是具备人类的感知能力,多传感器融合感知正是自动驾驶破局的关键。昱感微的雷视一体多传感器融合方案就好像一双比人眼更敏锐的眼睛,可以为自动驾驶系统提供更丰富更精准的视觉语言——
    发表于 04-11 10:26

    传感器融合的工作原理

    你怎么知道你在哪里?什么是真实的?这是传感器融合应该回答的问题。不是以哲学的方式,而是字面上的“我会自动撞入白宫吗?因为我被告知不要这样做”,这种方式内置于商业四轴飞行的固件中。
    发表于 04-04 13:11 638次阅读

    深度解析:多传感器融合SLAM技术全景剖析

    SLAM中,先验值通常从一系列传感器获得,比如惯性测量单元(IMU)和编码,而观测值则是通过GPS、相机和激光雷达等其他传感器获取的,后验值是融合
    发表于 02-23 11:31 3036次阅读
    深度解析:多<b class='flag-5'>传感器</b><b class='flag-5'>融合</b><b class='flag-5'>SLAM</b>技术全景剖析

    Spring Boot和飞腾派融合构建的农业物联网系统-改进自适应加权融合算法

    接上集: 上次实验我们已经完成多传感器融合算法的设计,本次实验注意完成改进自适应加权融合算法设计。 一、背景 通过利用温室控制系统来管理温室内的各种设备并控制温度、湿度,可以更好地探索和掌握环境因素
    发表于 01-06 12:18