0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

MIT让机器人像人类一样通过触摸和周围环境交互

hl5C_deeptechch 来源:DeepTech深科技 作者:DeepTech深科技 2021-01-27 10:46 次阅读

人类能够通过触摸找到周围的物体并明确其某些属性,这一技能对盲人来说尤其重要,而没有视觉障碍的人同样在日常生活中频繁用到这一点,例如在口袋中摸索并抓住一样东西。

近日,麻省理工学院(MIT)的研究人员进行了一项技术研究,旨在将这种人类能力复制到机器人上,从而使其通过触摸即可了解对象的位置并可实时估计对象的姿态。该研究成果预先发表在 arXiv 上,论文着重强调了不再局限于视觉、音频处理而只需通过触摸就能与其周围的环境进行交互的机器人的优势。

f0d1430a-5fda-11eb-8b86-12bb97331649.jpg

图 | 帮助机器人通过触觉感知来定位物体

“我们的研究目标是想证明,机器人通过高分辨率的触觉感应,甚至首次接触就可以准确定位已知的对象。与以前在触觉定位方面的工作相比,我们的方法有了重要的飞跃,因为我们不依赖于任何其他外部感应方式(例如视觉)或以前收集的与被操纵对象有关的触觉数据。恰恰相反,我们的技术是在模拟中直接训练的,它第一次触摸就可以定位已知对象,这在实际的机器人应用中至关重要,因为在真实的机器人中,实时数据收集成本很高或根本不可行。” 进行该项研究的研究人员之一 Maria Bauza 表示。

由于这项技术是在模拟中得到过训练,因此 Bauza 及其同事不再需要大量的数据收集。这些研究人员最初开发了一个框架,该框架可模拟给定对象与触觉传感器之间的接触,因此假设机器人有权访问与其交互的对象有关的数据(例如其 3-D 形状、特性等)。这些接触会被描绘为深度图像,可显示出对象穿透触觉传感器的程度。

随后,他们使用先进的机器学习技术进行计算机视觉和表征学习,将机器人收集的真实触觉观察结果与模拟生成的一组接触信息进行匹配。根据模拟数据集中的每次接触与实际或观察到的接触的匹配可能性,对其进行加权,最终框架会获得对象的可能姿势的概率分布。

Bauza 说道:“我们的方法将被绘为深度图像的接触编码到一个嵌入式空间中,这极大地简化了计算成本,可以做到实时执行。由于它可以产生有意义的姿势分布,因此可以轻松地与其他感知系统结合使用。例如,在多触点场景中,多个触觉传感器同时触摸一个对象,我们必须将所有的观察结果都整合到对象的姿态估计中。”

本质上,这种方法可以根据对象的 3D 形状模拟出接触信息。但他们发现,在利用这种技术仔细触摸对象时并不需要收集任何以前的触觉数据。也就是说,有了这项技术,机器人的触觉传感器可以在首次触摸到对象时就生成可能的姿势判断。

Bauza 表示,他们意识到触觉感知具有高度鉴别性,并能产生高度精确的姿势估计。“视力有时会受到遮挡的影响,但触觉感应却不会。因此,如果机器人触碰到了某个独特对象的一部分,且这种接触与其他的不同,那么我们的算法可以轻松识别出这一接触及对象的姿态。”

由于许多接触对象不具备的独特区域(即它们的放置方式可能导致最终的接触极其类似),因此 Bauza 及其同事开发的方法可以预测的是姿势分布,而不是单个姿势估计。这与此前开发的只收集单个姿势估计的对象姿态估计方法形成了鲜明的对比。而且,该框架预测的分布信息可以直接与外部信息进行合并,从而能够进一步减少对象姿态预测的不确定性。

值得注意的是,他们还观察到,同时使用多个手指接触对象,并同时对多个接触进行组合,也可以迅速减少对象姿态估计的不确定性。

参与这项研究的另一位研究员 Alberto Rodriguez 表示,“感应触摸能力最近在业界引起了极大了研究兴趣,而我们主要是通过结合三个因素来实现这一点的:(1)一种分辨率高但并不昂贵的感应技术,该技术使用小型相机来捕获触摸表面的变形(例如 GelSight 感应);(2)将此传感技术紧密结合到机器人手指(例如 GelSlim 手指)中;(3)基于深度学习的计算框架,来有效处理高分辨率触觉图像,从而通过已知零件完成触觉定位。”

总之,该研究小组设计的这项技术可以让机器人实时、高水平地估计其正在操作的对象的姿态,这样一来,就让机器人能够对其具体动作的影响做出更准确的预测,从而可以提高其在操作任务时的表现。这对工业当中根据物品形状的模型进行组装的制造商来说极具价值。

在未来的工作中,Bauza 团队计划扩展这一框架,使其能够涵盖有关对象的视觉信息。理想情况下,他们还希望将其技术转变为一种视觉 - 触觉传感系统,从而能够以更高的精度来估算对象的姿态。

“我们正在进行的另一项研究与这种方法密切相关,目的是探索触觉感知方法在复杂操作任务中的运用。现在我们正在学习能让机器人执行精确地抓放操作的模型,以实现稳定地抓握,帮助提高感知水平,改善触觉定位。” Bauza 表示。

原文标题:不再局限于视觉!MIT研发新技术让机器人通过触摸即可与周围环境进行交互

文章出处:【微信公众号:DeepTech深科技】欢迎添加关注!文章转载请注明出处。

责任编辑:haq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    210

    文章

    28212

    浏览量

    206549

原文标题:不再局限于视觉!MIT研发新技术让机器人通过触摸即可与周围环境进行交互

文章出处:【微信号:deeptechchina,微信公众号:deeptechchina】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    【书籍评测活动NO.51】具身智能机器人系统 | 了解AI的下个浪潮!

    。 这些技术的综合应用使具身智能系统能够进行复杂的环境感知、决策制定和物理操作。例如,通过多模态感知技术,智能体能够综合视觉、 听觉和触觉数据,更全面地理解和响应其所处的环境。 具身智能通过
    发表于 11-11 10:20

    解锁机器人视觉与人工智能的潜力,从“盲人机器”改造成有视觉能力的机器人(上)

    的地方,它赋予机器“看”并解释周围环境的能力。通过使用相机作为“眼睛”和高级AI作为“大脑”,机器人视觉为机器人提供了感知
    的头像 发表于 10-12 09:56 329次阅读
    解锁<b class='flag-5'>机器人</b>视觉与人工智能的潜力,从“盲人<b class='flag-5'>机器</b>”改造成有视觉能力的<b class='flag-5'>机器人</b>(上)

    人形机器人感知系统的特点:多模态感知、高精度、实时性

    优必选、小米科技、宇树科技等。   人形机器人感知系统包括哪些传感器和算法   人形机器人感知系统包括各种传感器,如视觉传感器:通过模拟人类双眼视觉系统的观测原理,利用双目相机、深度相
    的头像 发表于 07-30 01:05 4241次阅读

    机器人视觉的应用范围

    机器人视觉是种将计算机视觉技术应用于机器人领域的技术,它使得机器人能够感知和理解周围环境,实现自主决策和执行任务。随着人工智能、
    的头像 发表于 07-04 11:33 522次阅读

    机器人视觉的作用是什么

    、引言 机器人视觉是机器人技术的重要组成部分,它利用计算机视觉技术对机器人周围环境进行感知、识别和理解,为
    的头像 发表于 07-04 11:24 602次阅读

    寻迹智行机器人安全防护技术提高工厂整体搬运效率!

    搬运机器人的安全防护技术旨在通过人员、机器、物料、环境的和谐运作,使搬运过程中潜在的各种事故风险和伤害因素始终处于有效控制状态,它对于确保人员、机器
    的头像 发表于 04-03 11:01 389次阅读
    寻迹智行<b class='flag-5'>机器人</b>安全防护技术提高工厂整体搬运效率!

    高灵敏度柔性电子皮肤的研究与应用进展综述

    电子皮肤(E-skin)是机器人触觉系统,它附着在机器表面,通过传感单元检测压力,使机器人像一样
    的头像 发表于 03-27 10:25 847次阅读
    高灵敏度柔性电子皮肤的研究与应用进展综述

    电力电容器的使用对周围环境有哪些要求

    电力电容器,在电力系统中扮演着重要的角色。它不仅能够提高电力质量,还能提高电力传输的效率。然而,在使用电力电容器的过程中,我们需要注意环境要求,以确保其正常运行,同时减少对周围环境的不良影响。
    的头像 发表于 03-15 14:35 783次阅读

    具身智能移动操作机器人发展与研究

    多模态感知技术能够使具身智能移动操作机器人实现更高的自主性、高效性、通用性,增强对周围环境的局部感知能力,并为机器人提供丰富、稳定、准确的环境数据。
    发表于 03-12 11:38 639次阅读
    具身智能移动操作<b class='flag-5'>机器人</b>发展与研究

    小型移动搬运机器人可以帮助物流行业完成哪些作业呢?

    小型移动搬运机器人种能够自主移动并搬运物品的机器人。它通常配备有轮子或履带,可以在不同的地面上移动,如硬地面、地毯等。这种机器人可以通过
    的头像 发表于 03-06 13:37 384次阅读

    人形机器人的三大关键技术及挑战

    人形机器人是指外形和人类相似的机器人。它们可以通过模仿人类的外貌、动作和表情来与人类进行
    发表于 01-05 10:53 2575次阅读

    工业机器人由哪些部分组成?

    工业机器人需要依靠各种传感器来获取周围环境的信息,以便进行正确的定位、导航和避障等任务。
    发表于 12-29 10:55 1096次阅读
    工业<b class='flag-5'>机器人</b>由哪些部分组成?

    开源项目!教你如何复刻自平衡赛车机器人、智能家居中控、竞技机器人先进模糊控制器等

    岂不是手到擒来。 它,就是可以自平衡的赛车机器人——B_ROBOT_100ASK 项目简介 本项目基于jjrobots的开源项目B-ROBOT EVO2进行复刻,与原开源项目不一样的地方是,作者将原本
    发表于 12-26 09:17

    宇树科技发布首款双足机器人H1

    H1 装备了 3D 激光雷达传感器和深度摄像头,能精准感知周围环境并避开障碍,展现出高度的环境交互能力。它是款功能齐全的机器人,不仅能搬运
    发表于 12-20 09:38 1067次阅读

    在工厂内外,机器人如何改善我们的世界

    德州仪器机器人系统经理 Matthias Thoma 表示:“自从 50 多年前安装第台工业机器人以来,我们已经取得了长足的进步。机器人变得更加智能、更加精确、对
    的头像 发表于 12-07 11:18 600次阅读