0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

FSD渐入佳境,视觉方案还在机器人中“打酱油”?

双目立体视觉 来源:双目立体视觉 作者:双目立体视觉 2024-07-12 14:58 次阅读

一边是技术圈顶流,一边在当前行业应用中没什么存在感。

优点缺点,两头拔尖

优点与缺点都突出的特点,让视觉方案一直伴随着争议,在近些年的行业应用上也一直透着“底气”不足。但随着在自动驾驶方面,纯视觉FSD开始表现出极其优秀的智驾能力,是否意味着,对于机器人导航方面,视觉方案也不仅仅是配角?

视觉方案的优势除却成本较低,更加重要的是能够获取更丰富的环境信息,让机器人在重定位、场景分类、交互等功能实现上更具优势。但缺陷也因为数据处理量巨大,对算力要求很高,在算法硬件无法给予足够支持时,机器人就会出现精准度下降、卡顿、避障失灵等问题,进而导致任务无法达到预期,甚至失败。这意味着要发挥出视觉方案的实际潜力,要么搭载高算力平台,要么需要优化程度非常高的算法,否则所谓的巨大潜力,便成了笑话。

回到现实,让选择视觉的消费级扫地机器人产品重新拉高算力成本,显然不可能。但如果算力无法满足要求,算法就会做剪枝,阉割功能和极限性能,这也是视觉方案在当前行业应用上只能做配角的重要原因。

消费级的产品注定了其目前能搭载的芯片算力不会太高,想要真正发挥视觉方案的应用潜力,便只能在算法上下功夫。

算法瘦身,提升算力利用率

INDEMIND认为,对算法“瘦身”,并提高算力资源利用率,或许是打破算力桎梏的有效路径。为此,INDEMIND进行了多年的实践探索。

一方面,通过对算法进行轻量化“瘦身”,研发了轻量化VSLAM(基于深度学习特征的SLAM架构)、轻量化Depth(基于深度学习特征匹配的Depth)、轻量化深度学习模型(底层算子自研、剪枝、量化)等,在不影响功能表现的前提下,对算力要求有效降低。

另一方面, 通过采用硬件加速技术,对于视觉处理采用NEON加速、GPU加速、DSP加速等方式,提升芯片算力利用率。(系统运行时,芯片的计算单元不会全部被使用,导致算力资源浪费。)

结果证明,通过全栈自研轻量化算法和应用一系列软硬件优化技术,INDEMIND实现了在几美金的计算平台上稳定运行整套VSLAM算法。

目前,公司推出的家用机器人AI解决方案搭载4核A53/A55级别芯片即可满足需求,能够适配如RK3566、VicoreTek 6601/6801等(全解决方案情况下,双目视觉多传感器融合SLAM、双目Depth、物体识别及整机完整SDK)。需要说明的是,现有的大部分视觉导航方案在算力上大多需要TX2及以上,甚至PC级算力需求,且对CPU、GPU或NPU、内存均有较高要求。

算法再升级,赋能产品“真”创新

· 打破现有建图惯例,首创“真”三维建图

目前主流的传统2D栅格地图、拓扑地图虽然能够描述环境中存在的障碍物几何特征及其环境结构信息,但却缺乏机器人用于理解环境、人机/物机交互等业务逻辑的高层次语义信息。

wKgaomaQ0--ALMJFAEOVdT6Dj_A991.gif工程机演示,不代表最终量产效果

INDEMIND则基于自研的VSLAM技术,首创了市面上真正意义上的三维地图。地图构建过程中,能够重建物体及环境的结构信息,还有物体类别、功能属性等“常识”性信息,这为上层功能开发提供了底层数据支持。

· 厘米级精准避障技术,无惧玻璃、积木

与自动驾驶渐入佳境相反,机器人仍在与避障死磕。一块积木、一面玻璃等似乎成了大多数扫地机器人无法逾越的天堑。

wKgZomaQ0_KAP-fYABA86FWrla0043.gif

INDEMIND基于设备端、云端智能决策平台、大数据平台三端专门建立了一套智能决策引擎,用于支持机器人完成逻辑判断和决策,且在不断使用中,能够根据关键数据不断更新算法模型,持续提升场景处理和问题应对能力。借助微秒级的智能决策引擎,机器人能够稳定检测各类障碍物,支持低矮障碍物避障(地插、桌椅底座等);高反障碍物避障(玻璃、镜面等)。同时,配合环境补光技术,机器人在黑暗环境同样能够轻松应对。

wKgaomaQ0_OAYBUJADbwcGnkZLg957.gifwKgaomaQ0_SAS-npAAXNW5wKbmQ786.gifwKgZomaQ0_aAMUyNADuOzKTjioM338.gifwKgaomaQ0_iAESKWACzm52amgHs145.gif

· “真”脏污识别技术,哪里脏扫哪里

自研脏污识别技术,让扫地机器人像人一样“定点打击”。基于独有的图像算法,支持任何地面材质、花色、光线下的透明、半透明,不透明液体及干涸污渍识别、颗粒状脏污识别、粉末状脏污识别。而基于识别结果,系统能够针对脏污类型和脏污程度自主决策清洁策略,提升清洁质量和覆盖率。

wKgZomaQ0_mAf8zHAJhoCgHx6K8513.gif在清洁过程中,机器人能够将脏污检测结果及位置与场景地图和轨迹进行叠加,实现全场景的脏污地图管理 wKgZomaQ0_2ASE6tACKxwbG3tzE155.gifwKgaomaQ0_-AJwwEAJY7azVGHCE616.gifwKgZomaQ1AKACHg5AB5GbtRznJc807.gifwKgaomaQ1AeAWFxOAB_6jcuTpHs684.gifwKgZomaQ1AiANSCaAA-M7KlMCoQ823.gif

通过深耕算法,打破算力限制,并对智能化方面深度创新,INDEMIND用实力证明视觉方案绝非配角。

审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 算法
    +关注

    关注

    23

    文章

    4536

    浏览量

    91918
  • SLAM
    +关注

    关注

    23

    文章

    404

    浏览量

    31697
  • 扫地机器人
    +关注

    关注

    20

    文章

    765

    浏览量

    52938
  • FSD
    FSD
    +关注

    关注

    0

    文章

    83

    浏览量

    5983
  • INDEMIND
    +关注

    关注

    1

    文章

    21

    浏览量

    3570
收藏 人收藏

    评论

    相关推荐

    酱油赚分

    酱油赚分酱油赚分酱油赚分
    发表于 09-06 22:46

    酱油

    酱油酱油酱油
    发表于 09-07 00:27

    酱油

    酱油酱油酱油
    发表于 09-10 09:16

    现代机器人中有什么传感器?

    控制和通信 IC 的发展在实现下一代的机器人中起到重要作用。然而,这些复杂的现代机器人的核心是许多新的、小型化和低成本的传感技术的出现与融合。对实现下一代机器人至关重要的几项关键传感器技术包括磁性位置传感器、存在传感器、手势传感
    发表于 07-31 07:46

    工业机器人中面对的控制问题是什么

    刚开始接触机器人的时候,我在师兄的机器人代码里死活找不到有关控制计算的函数,作为常年和控制框图打交道的我,很是疑惑控制回路去哪里了?因此本文介绍一下工业机器人中的控制问题。参考华科贺磊博士的观点
    发表于 06-28 09:29

    工业机器人视觉装配实训平台实验

    组成(台皮带线输送模组、视觉定位及检测模组、码垛模组、装配模组、螺丝模组、取料模组、机器人TCP标定模组、PC模组等)。通过对该工业机器人视觉
    发表于 07-01 12:05

    工业机器人中有哪些控制问题

    工业机器人中的伺服驱动的目的是什么?工业机器人中的关节内部驱动结构是怎样构成的?
    发表于 10-11 08:37

    远程信息处理技术渐入佳境

    远程信息处理技术渐入佳境 最近,充电式混合动力车和电动汽车(EV)发布,以及各种概念接踵而来。仅雷诺就在9月份的法兰克福汽车展(IAA)上发布了三款新型电动车。厂
    发表于 11-02 15:48 496次阅读

    ARM图形芯片渐入佳境 27家厂商购买其芯片授权

    ARM图形芯片渐入佳境 27家厂商购买其芯片授权  ARM公司近日宣布四季度又有两家厂商签约购买了其新款Mail图形芯片的专利设计授权,其中也包括知名厂商三星公司,目
    发表于 02-11 09:09 995次阅读

    便携式医疗电子市场渐入佳境

    便携式医疗电子市场渐入佳境          近年来,由于人们对于健康生活的追求日益增长,以及一系列的政策驱动,中国便携式/家庭医疗电子市
    发表于 04-22 10:04 706次阅读

    4K电视的发展渐入佳境,4K内容缺乏是4K产业发展的拦路虎之一

    相比4K电视发展的一直风生水起,4K内容的发展似乎有点慢热,甚至有点拖了4K电视普及的后腿。但从2017年开始,4K内容的发展似乎渐入佳境
    发表于 08-27 11:22 1375次阅读

    2020年是5G行业专网“关键年”,5G行业专网“渐入佳境

    在今天召开的中国移动云上科技周“5G+融创能力汇-- 5G联创行业专网专场”活动上,GSMA大中华区技术总经理刘鸿表示,2020年是5G行业专网“关键年”。当前5G行业专网可以说是渐入佳境,越来越多的企业意识到应该与运营商合作建设5G网络。
    的头像 发表于 06-18 16:19 2623次阅读

    中国移动5G+MEC助力行业数字化转型渐入佳境

    5GtoB在公网专用成熟商用的基础上,向高可靠性方向又迈出了关键的一步,5G+MEC助力行业数字化转型渐入佳境
    发表于 12-18 09:26 1339次阅读

    MiniLED供应链也渐入佳境,量产良率或拉高至9成以上

    苹果春季产品发表会蓄势待发,MiniLED供应链也渐入佳境,据说可以相信量产良率很快将拉高至9成以上。
    的头像 发表于 02-24 13:56 1920次阅读

    近几年小家电市场的发展渐入佳境

    伴随着消费升级的新趋势,小家电市场的发展这几年渐入佳境。 不同于 80 年代的老三件手表、自行车、缝纫机,也不同于后来的新三件彩电、冰箱、洗衣机,伴随着互联网成长起来的年轻一代,逐渐接受“小家电
    的头像 发表于 03-30 14:39 2152次阅读
    近几年小家电市场的发展<b class='flag-5'>渐入佳境</b>