0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

传感技术进一步扩大环境感知的应用机会

CEVA 来源:CEVA 作者:CEVA 2021-09-18 10:21 次阅读

移动计算推动了产品机会的爆发——智能手机、可穿戴设备、可听设备、运动相机等等。传感技术将进一步扩大必须具有环境感知的应用机会。现在,对于运输、机器人、家庭自动化、智能城市、工厂和仓库管理中许多可能的应用来说,通过视觉、雷达或激光雷达传感来进行物体识别和碰撞警告,通过超声波传感器实现短距离的接近侦测,通过IMU进行运动和姿势检测,基于声学的危险声音检测已经很普遍了。说实话,这个清单是无穷无尽的。我们拥有建立一个由智能传感驱动的未来主义的、几乎是科幻小说的世界所需要的所有原材料。但是怎么做呢?

从感知到运动

想一想一个在机场周围移动的机器人助手。帮助乘客办理登机手续,找到他们的登机口,获得航班的详细信息。这个机器人必须在机场内自由移动,不能撞到在各个方向行走或奔跑的人,或可能是静止的或有时可能移动的物体。这个机器人助手应该知道如何在一个不断变化的环境中进行智能导航。而且,它必须在一定的可能性范围内,能够理解并响应自然语言的语音命令。我们将在下面讨论这个问题。

光学和接近传感器是智能导航技术的一个起点。这些传感器信息输入到一个被称为SLAM的复杂算法中,并生成一个不断移动变化的的空间的点阵云图且随之变化更新。弱光条件下,SLAM技术正越来越多地被航位推算所加强,因为在弱光条件下,光学的效果较差。这种方法从一个已知的位置追踪运动,从车轮运动、加速计和其他传感器中获取信息。同时,接近传感器提供输入,避免撞上一个物体或一个人。我们已经有多个传感器向算法提供信息,以构建地图和定位机器人助手在地图中的位置。

基于摄像头的SLAM需要高精度的线性方程求解,矢量DSP平台很适合。基于超声波的接近感测必须从降噪开始,在回声和其他杂波中定位最近的物体,然后进行范围(和方向)计算。这种信号处理非常适合于标量DSP。

从声音到行动

一位乘客看到一个助手,就叫它过来:“嘿,Airbot!” 首先,助理必须识别这个命令和它的来源。这一步需要一些复杂的音频处理,尤其是在机场航站楼这样的嘈杂环境中。识别触发语音命令是任何智能音箱中都会有的基本人工智能。机器人还可以通过beamforming“”波束成形技术检测语音命令的来源方向。这个技术需要更多的信号处理,从多个麦克风在稍微不同的时间检测到的识别命令中找出方向。

我们的机器人助手”滑行”到乘客身边,沿途避开其他障碍物,在几英尺远的地方停下来,问道:“我能为你做些什么?” 它在屏幕上展示了一系列它知道如何回答的问题,然后乘客说,“我想办理登机手续”。我们的机器人首先必须做一些更多的信号处理,以减少该音频信号的噪音,部分通过波束成形,部分通过回声消除。然后,它必须识别这个命令。

自然语言处理(NLP)可以在云端处理,但机场网络有很大的负荷。因此,NLP必须在本地处理,以便快速响应。机器人应快速响应,以提供令人满意的用户体验。它要求乘客直接看着它的屏幕,拍一张照片,然后要求乘客插入一个图片ID,如护照身份页。然后它可以比较这些图片以增加安全性,这需要一个强大的可编程神经网络引擎。

办理登机手续的剩余步骤?那就有传统的嵌入式处理就够了。

将一切结合起来

智能传感设备必须使用一个支持同时处理多个传感器的平台。它应该为前端信号处理提供强大的标量DSP支持,为基于图像的计算和SLAM提供矢量DSP支持。对语音和视觉人工智能的神经网络支持,也是一个矢量DSP,但对神经网络有特殊的扩展,同时在SDK中有丰富的软件编译器和库,为你提供这些技术领域的所有基础支持。

CEVA的 “SensPro2 ”是传感平台提供动力的方案之一。基于CEVA在视觉、音频、SLAM和人工智能方面的强大背景,SensPro2是一款用于多任务传感和多传感器的人工智能(包括摄像头、雷达、激光雷达、飞行时间、麦克风和惯性测量单元)的高度可扩展和增强的第二代高性能传感器控制中心SensorHub DSP。

责任编辑:haq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2551

    文章

    51163

    浏览量

    754150
  • 智能手机
    +关注

    关注

    66

    文章

    18499

    浏览量

    180323
  • 机器人
    +关注

    关注

    211

    文章

    28466

    浏览量

    207310

原文标题:传感器,到处都是传感器。现在我该怎么办?

文章出处:【微信号:CEVA-IP,微信公众号:CEVA】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    台积电拟进一步收购群创工厂扩产先进封装

    据半导体设备公司的消息人士透露,台积电正计划进一步扩大其在先进封装领域的产能。今年8月,台积电已经收购了群创位于南科的5.5代LCD面板厂,而现在,市场消息称台积电有意收购更多群创在南科附近的工厂。
    的头像 发表于 10-30 16:38 273次阅读

    英特尔将进一步分离芯片制造和设计业务

    面对公司成立50年来最为严峻的挑战,英特尔宣布了项重大战略调整,旨在通过进一步分离芯片制造与设计业务,重塑竞争力。这决策标志着英特尔在应对行业变革中的坚定步伐。
    的头像 发表于 09-19 16:48 327次阅读

    通过展频进一步优化EMI

    电子发烧友网站提供《通过展频进一步优化EMI.pdf》资料免费下载
    发表于 09-04 09:32 1次下载
    通过展频<b class='flag-5'>进一步</b>优化EMI

    RFTOP进一步扩充波导同轴转换器产品线

    近日高品质微波毫米波器件供应商RFTOP(频优微波)进一步扩充波导同轴转换器产品线,新增了同轴公头全系列新品,覆盖1.0mm、1.85mm、2.4mm、2.92mm、SMA、SMP等同轴公头,涵盖
    的头像 发表于 09-03 17:06 683次阅读
    RFTOP<b class='flag-5'>进一步</b>扩充波导同轴转换器产品线

    浩亭宣布新任行政总裁,进一步加强亚太区业务

    )、 ANZ (澳大利亚、新西兰)、中国、印度、韩国和日本地区的业务管理。  “有了刘女士的加入,我们赢得了名得力干将。她将协助我们扩大进一步加强在重要的东亚关键市场的影响力。我们期待着成果的合作。”浩亭
    发表于 07-26 15:52 249次阅读
    浩亭宣布新任行政总裁,<b class='flag-5'>进一步</b>加强亚太区业务

    iPhone 15在美国市场需求进一步减弱

    7月19日,国际媒体披露了市场研究机构CIRP的最新报告,揭示了iPhone 15系列在美国市场的受欢迎程度相较于前代iPhone 14系列有所下滑。这趋势在CIRP最新发布的第二季度数据中得到了进一步印证,显示iPhone 15系列的市场需求正经历持续放缓。
    的头像 发表于 07-19 16:11 684次阅读

    芯驰科技与IAR宣布进一步扩大合作

    全球领先的嵌入式系统开发软件解决方案供应商IAR与全场景智能车芯引领者芯驰科技宣布进一步扩大合作,最新版IAR Embedded Workbench for Arm已全面支持芯驰科技的E3119
    的头像 发表于 07-11 15:55 626次阅读

    西门子与微软进一步扩展战略合作关系

    近日,西门子数字化工业软件与微软宣布进一步扩展双方的战略合作关系。通过微软Azure云服务,西门子正式推出Xcelerator as a Service工业软件解决方案,为客户提供更灵活、高效的服务体验。
    的头像 发表于 05-21 10:47 688次阅读

    进一步解读英伟达 Blackwell 架构、NVlink及GB200 超级芯片

    新的标准。Blackwell架构和GB200 超级芯片有望推动英伟达在人工智能领域更进一步,巩固其在高性能计算和人工智能技术领域的领先地位。随着亚马逊网络服务、谷歌云和微软 Azure 等公司开始整合这些新系统,英伟达创新的影响将进一步
    发表于 05-13 17:16

    卓驭科技与高通合作宣布进一步推动汽车行业智能驾驶技术的发展

    今日,深圳市卓驭科技有限公司(以下简称:卓驭科技)与高通技术公司宣布扩展双方的技术合作,利用基于Snapdragon Ride平台的全新智能驾驶产品,进一步推动汽车行业智能驾驶技术的发
    的头像 发表于 04-25 16:25 1681次阅读
    卓驭科技与高通合作宣布<b class='flag-5'>进一步</b>推动汽车行业智能驾驶<b class='flag-5'>技术</b>的发展

    Arbe在中国上海设立分公司,进一步增强企业影响力

    摘要:中国团队将进一步促进Arbe与中国市场重要企业之间的紧密合作。 新代4D成像雷达解决方案的头部企业Arbe Robotics(纳斯达克股票代码:ARBE;以下称Arbe)近日宣布已在上海设立
    的头像 发表于 03-25 09:44 451次阅读

    英飞凌重组销售与营销组织,进一步提升以客户为中心的服务及领先的应用支持能力

    【 2024 年 2 月 28 日,德国慕尼黑讯】 为实现有雄心的增长目标,英飞凌科技股份公司(FSE代码:IFX / OTCQX代码:IFNNY)正进一步强化其销售组织。自3月1日起,英飞凌的销售
    发表于 03-01 16:31 464次阅读
      英飞凌重组销售与营销组织,<b class='flag-5'>进一步</b>提升以客户为中心的服务及领先的应用支持能力

    材料价格进一步下降,盈利触底 锂电材料企业如何应对?

    在上游原料价格相对稳定、终端销量有所好转的情况下,季度四大锂电主材价格却出现进一步下跌。
    的头像 发表于 03-01 10:25 1064次阅读

    大族封测IPO进程再进一步

    2024年1月17日,深交所向大族封测发出IPO审核意见,标志着这家LED及半导体封测专用设备制造商的上市进程又向前迈进了一步
    的头像 发表于 01-25 14:51 782次阅读

    MediaTek宣布将进一步深化与海信的长期合作关系

    MediaTek 宣布将进一步深化与海信的长期合作关系。海信率先采用了 MediaTek Pentonic 智能电视芯片,显著提升了流媒体内容的画质表现。自 2024 年起,MediaTek AI 超级分辨率技术(AI-SR)将应用于海信全系列智能电视产品。
    的头像 发表于 01-12 09:37 814次阅读