0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

MIT让机器人像人类一样通过触摸和周围环境交互

hl5C_deeptechch 来源:DeepTech深科技 作者:DeepTech深科技 2021-01-27 10:46 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

人类能够通过触摸找到周围的物体并明确其某些属性,这一技能对盲人来说尤其重要,而没有视觉障碍的人同样在日常生活中频繁用到这一点,例如在口袋中摸索并抓住一样东西。

近日,麻省理工学院(MIT)的研究人员进行了一项技术研究,旨在将这种人类能力复制到机器人上,从而使其通过触摸即可了解对象的位置并可实时估计对象的姿态。该研究成果预先发表在 arXiv 上,论文着重强调了不再局限于视觉、音频处理而只需通过触摸就能与其周围的环境进行交互的机器人的优势。

f0d1430a-5fda-11eb-8b86-12bb97331649.jpg

图 | 帮助机器人通过触觉感知来定位物体

“我们的研究目标是想证明,机器人通过高分辨率的触觉感应,甚至首次接触就可以准确定位已知的对象。与以前在触觉定位方面的工作相比,我们的方法有了重要的飞跃,因为我们不依赖于任何其他外部感应方式(例如视觉)或以前收集的与被操纵对象有关的触觉数据。恰恰相反,我们的技术是在模拟中直接训练的,它第一次触摸就可以定位已知对象,这在实际的机器人应用中至关重要,因为在真实的机器人中,实时数据收集成本很高或根本不可行。” 进行该项研究的研究人员之一 Maria Bauza 表示。

由于这项技术是在模拟中得到过训练,因此 Bauza 及其同事不再需要大量的数据收集。这些研究人员最初开发了一个框架,该框架可模拟给定对象与触觉传感器之间的接触,因此假设机器人有权访问与其交互的对象有关的数据(例如其 3-D 形状、特性等)。这些接触会被描绘为深度图像,可显示出对象穿透触觉传感器的程度。

随后,他们使用先进的机器学习技术进行计算机视觉和表征学习,将机器人收集的真实触觉观察结果与模拟生成的一组接触信息进行匹配。根据模拟数据集中的每次接触与实际或观察到的接触的匹配可能性,对其进行加权,最终框架会获得对象的可能姿势的概率分布。

Bauza 说道:“我们的方法将被绘为深度图像的接触编码到一个嵌入式空间中,这极大地简化了计算成本,可以做到实时执行。由于它可以产生有意义的姿势分布,因此可以轻松地与其他感知系统结合使用。例如,在多触点场景中,多个触觉传感器同时触摸一个对象,我们必须将所有的观察结果都整合到对象的姿态估计中。”

本质上,这种方法可以根据对象的 3D 形状模拟出接触信息。但他们发现,在利用这种技术仔细触摸对象时并不需要收集任何以前的触觉数据。也就是说,有了这项技术,机器人的触觉传感器可以在首次触摸到对象时就生成可能的姿势判断。

Bauza 表示,他们意识到触觉感知具有高度鉴别性,并能产生高度精确的姿势估计。“视力有时会受到遮挡的影响,但触觉感应却不会。因此,如果机器人触碰到了某个独特对象的一部分,且这种接触与其他的不同,那么我们的算法可以轻松识别出这一接触及对象的姿态。”

由于许多接触对象不具备的独特区域(即它们的放置方式可能导致最终的接触极其类似),因此 Bauza 及其同事开发的方法可以预测的是姿势分布,而不是单个姿势估计。这与此前开发的只收集单个姿势估计的对象姿态估计方法形成了鲜明的对比。而且,该框架预测的分布信息可以直接与外部信息进行合并,从而能够进一步减少对象姿态预测的不确定性。

值得注意的是,他们还观察到,同时使用多个手指接触对象,并同时对多个接触进行组合,也可以迅速减少对象姿态估计的不确定性。

参与这项研究的另一位研究员 Alberto Rodriguez 表示,“感应触摸能力最近在业界引起了极大了研究兴趣,而我们主要是通过结合三个因素来实现这一点的:(1)一种分辨率高但并不昂贵的感应技术,该技术使用小型相机来捕获触摸表面的变形(例如 GelSight 感应);(2)将此传感技术紧密结合到机器人手指(例如 GelSlim 手指)中;(3)基于深度学习的计算框架,来有效处理高分辨率触觉图像,从而通过已知零件完成触觉定位。”

总之,该研究小组设计的这项技术可以让机器人实时、高水平地估计其正在操作的对象的姿态,这样一来,就让机器人能够对其具体动作的影响做出更准确的预测,从而可以提高其在操作任务时的表现。这对工业当中根据物品形状的模型进行组装的制造商来说极具价值。

在未来的工作中,Bauza 团队计划扩展这一框架,使其能够涵盖有关对象的视觉信息。理想情况下,他们还希望将其技术转变为一种视觉 - 触觉传感系统,从而能够以更高的精度来估算对象的姿态。

“我们正在进行的另一项研究与这种方法密切相关,目的是探索触觉感知方法在复杂操作任务中的运用。现在我们正在学习能让机器人执行精确地抓放操作的模型,以实现稳定地抓握,帮助提高感知水平,改善触觉定位。” Bauza 表示。

原文标题:不再局限于视觉!MIT研发新技术让机器人通过触摸即可与周围环境进行交互

文章出处:【微信公众号:DeepTech深科技】欢迎添加关注!文章转载请注明出处。

责任编辑:haq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    214

    文章

    31611

    浏览量

    224320

原文标题:不再局限于视觉!MIT研发新技术让机器人通过触摸即可与周围环境进行交互

文章出处:【微信号:deeptechchina,微信公众号:deeptechchina】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    为什么说关节扭矩传感器是高端机器人的“触觉神经”?

    机器人在每毫秒都能“感知”到自己被推、拉或碰到东西。 正是这种连续、精准的力觉反馈,机器人实现了三大关键能力: 1. 柔顺控制:像人手一样“顺着来” 传统
    发表于 04-17 17:27

    智能机器人从0到1系统入门课程 带源码课件 百度网盘下载

    ,且无法传达空间信息;视觉识别虽然精准,但缺乏交互的即时性和意图的明确性。真正的智能交互,在于将两者有机结合。 未来的机器人将不再依赖简单的“关键词触发”,而是通过多模态融合技术,像
    发表于 04-11 16:41

    机器感受触觉:电子皮肤手套,正在重塑“触摸”的未来?

    你是否想过——当机器能像人的皮肤一样,精准感知指尖的轻触、掌心的握持,甚至布料的纹理差异,世界会发生怎样的改变? 过去,我们习惯了“人适应机器”:在手机上滑动、向设备输入指令,却很少
    的头像 发表于 12-26 10:55 1937次阅读
    <b class='flag-5'>让</b><b class='flag-5'>机器</b>感受触觉:电子皮肤手套,正在重塑“<b class='flag-5'>触摸</b>”的未来?

    连载|开发工具,易安卓系统功能调用像写应用逻辑一样简单

    通过自研系统封装库,易安卓将复杂的系统控制能力以接口形式开放给开发者,系统功能调用像写应用逻辑一样简单。
    的头像 发表于 11-27 11:40 87次阅读
    连载|开发工具,易安卓<b class='flag-5'>让</b>系统功能调用像写应用逻辑<b class='flag-5'>一样</b>简单

    超能同事上线:人形机器人如何重塑未来工作场景?

    以富唯智能为代表的创新企业,通过“知识驱动的具身智能工业机器人技术框架”,给出了极具前瞻性的解决方案。该框架融合自研体化控制器、零代码编程与任务规划大模型GRID,构建出“大脑、小脑、躯干、世界模型、虚实融合仿真器”五大核心模
    的头像 发表于 11-11 17:41 1090次阅读
    超能同事上线:人形<b class='flag-5'>机器人</b>如何重塑未来工作场景?

    RK3576机器人核心:三屏异显+八路摄像头,重塑机器人交互与感知

    。· 多屏显示:显示配送状态、路径信息及简单的触摸操作界面,方便工作人员监控与交互。 开启您的下机器人项目综上所述,瑞芯微RK3576凭借其卓越的多屏支持、强大的多摄像头接入能力和
    发表于 10-29 16:41

    跨越空间界限:远距离无线充电如何重塑机器人工作半径

    通过磁场共振自动补充能量。 这就是远距离无线充电技术创造的奇迹,它消除了工业机器人对精准停靠的依赖,充电变得像路过一样简单。  01 远距离充电挑战:工业
    的头像 发表于 10-17 16:35 966次阅读

    实现永久供电:物联网传感器的微能量收集技术

    微能量收集技术电子设备像植物一样,从周围环境(如光、热、振动)中“汲取”能量,实现半永久性或永久性的自供电。
    的头像 发表于 10-09 12:53 780次阅读
    实现永久供电:物联网传感器的微能量收集技术

    【「AI芯片:科技探索与AGI愿景」阅读体验】+具身智能芯片

    神经网络。 3、感知、存储、计算、执行体化 有难度也有前景 4、湿件具身智能 凿除与环境进行类似生物的认知交互机器人,难点: 在于理解生物系统的组织原则并将其融入
    发表于 09-18 11:45

    再掀语音交互革命,广和通AI解决方案加速机器人听觉进化

    机器人世界里,感知是智能化的第步,是机器人获取环境信息,学习适应并自主决策的前提。听觉作为五感之,深度融合AI,可帮助
    的头像 发表于 08-26 17:44 1112次阅读

    机器人竞技幕后:磁传感器芯片激活 “精准感知力”

    地磁基准的惯性导航系统可持续提供可靠数据。实测显示,搭载昆泰芯 KTM59 系列融合磁传感器的机器人,在复杂动态环境中定位可靠性达 99.7%,较单传感器方案提升 27%。 磁传感器芯片的技术突破
    发表于 08-26 10:02

    傅利叶人形机器人GR-3正式发布,主打交互陪伴,可触摸

    的设计灵感深受动画电影《超能陆战队》中治疗机器人“大白”的影响,主打陪伴属性,旨在通过日常互动、社交交流与情绪陪伴,构建人与机器人之间的情感纽带。GR-3拥有两个明确的应用目标:是社
    的头像 发表于 08-07 14:00 3886次阅读

    天吃透条产业链:具身智能(AI+机器人

    01 产业链全景图 02 具身智能简介 简单来说,具身智能就是给人工智能赋予个实体,它能够像人类一样在现实世界中行动、感知和学习,而不是仅仅局限于虚拟世界。打个比方,你有
    的头像 发表于 06-19 09:21 2824次阅读
    <b class='flag-5'>一</b>天吃透<b class='flag-5'>一</b>条产业链:具身智能(AI+<b class='flag-5'>机器人</b>)

    南京工业大学:仿生触觉传感系统机器人拥有“人类指尖”般的细腻感知

      想象下,未来的机器人不仅能灵活抓取物体,还能像人类一样感知丝绸的顺滑、砂纸的粗糙,甚至区分不同面料的细微纹理。这切的关键在于“触觉”
    的头像 发表于 06-14 17:32 1097次阅读
    南京工业大学:仿生触觉传感系统<b class='flag-5'>让</b><b class='flag-5'>机器人</b>拥有“<b class='flag-5'>人类</b>指尖”般的细腻感知

    明远智睿SSD2351开发板:语音机器人领域的变革力量

    接口则语音机器人可以连接到互联网,实时获取最新的信息,增强其智能性和交互能力。 在实际应用场景中,以智能客服语音机器人为例。SSD2351开发板可以驱动语音识别模块,准确识别用户的问
    发表于 05-28 11:36