0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

叠叠乐机器人展示了之前的机器人系统无法做到的事

电子工程师 来源:lq 2019-02-19 11:40 次阅读

搭积木可不简单。

除了训练小朋友的整体项目意识,这也是一个视觉、触觉、交互和策略都需要上线的游戏。而在众多的搭积木游戏中,“叠叠乐”可能是其中最有趣,难度也最高的一种。

叠叠乐,又名叠叠高,也叫叠叠木,是一款经典的木制益智积木玩具。

游戏规则看似很简单,从下方的积木中,抽一根往上搭。但是游戏过程极度考验耐性和自制力。

这个游戏手残党反正是玩不了,手脚不是太灵活的小伙伴,也放弃吧。

但是,这个游戏对MIT团队研发的机器人来说,轻而易举~

它是怎么做到的呢?

首先,在硬件方面,需要一个软齿夹钳、一个力传感腕带以及一个外部摄像头,这些部件是用于观察和感应积木塔以及积木的。

其次,当机器人小心地推动一块积木时,计算机利用外部摄像头和力传感腕带分别接收视觉和触觉反馈,然后与机器人先前做出的动作进行比较。

在此过程中还需考虑了不同动作可能产生的结果——具体来说就是能否用特定的力度,抽出特定位置的积木放在塔顶并确保积木塔不倒。机器人会实时 “学习”是否继续推动这块积木来防止积木塔倒塌。

具体来说,与国际象棋、围棋等更依赖认知思维的任务或游戏不同,玩叠叠乐还需要掌握物理技巧,如试探、推、拉、放置和码齐。

这项游戏需要交互式感知和操作,你必须去触摸积木塔才能学会何时以及如何移动积木。

整个过程很难模拟,机器人必须和现实中的积木塔进行交互来学习。主要的困难是,如何利用物体和物理常识从相对较少的实验中学习。

当然,MIT团队并不止步叠叠乐游戏,目前开发的触觉学习系统正应用在垃圾分类回收、组装消费品等需要精确物理交互的任务。

相关研究细节发表在最近的《Science Robotics》期刊上。论文的第一作者是麻省理工学院的研究生Nima Fazeli。研究团队还包括Miquel Oller,Jiajun Wu,Zheng Wu和麻省理工学院大脑和认知科学教授Joshua Tenenbaum。

论文地址:

http://robotics.sciencemag.org/content/4/26/eaav3123

这项工作是开创性的,麻省理工学院机械工程系的Alberto Rodriguez评论道:“叠叠乐机器人展示了之前的机器人系统无法做到的事:快速学习执行任务的最优方法。它不仅利用常用的视觉反馈,还包括触觉反馈和物理交互。”

例如,在手机生产流水线上,几乎每一步都需要卡扣连接和螺丝固定,在这个过程中是依靠力和触摸来判断是否正确组装的,而不是视觉。

而这项技术的灵魂就正是是研究人员精心构建的学习模型。

推拉

在叠叠乐游戏中,54块长方形积木垂直交错堆叠成18层的积木塔,每层有三块积木,玩家轮流抽出一块积木放在塔顶来增加积木塔的高度,但是又不能使积木塔倒下。

想让机器人学会玩叠叠乐,传统的做法是收集积木块、积木塔和机器人三者之间可能发生的所有交互,这需不但要耗费大量计算资源,还需要成千上万次抽积木的操作。

Rodriguez和他的同伴从人类认知和实际操作角度寻找到了一种更有效的数据处理方式。

这个团队定制了一个行业标准的ABB IRB 120机械臂,在机器人能够触到的范围内搭建了一个积木塔,然后开始训练。机器人首先随机选择一块积木和推动积木的位置,然后用较小的力试图将积木推出塔外。

计算机则会在这个过程中记录每次尝试的视觉和力量数据,并标注是否成功。

这个机器人没有进行成千上万次的尝试(包括多次重建积木塔),它只进行了大约300次的尝试。把相似的数据和结果进行聚类分组,表示特定的积木行为。例如,一组数据可能表示很难移动的积木,另一组可能表示比较容易移动的积木,或者移动后积木塔会倒塌的积木。对于每一组数据,开发一个简单的模型,机器人将会基于它现有的视觉和触觉数据来预测移动一块积木的行为。

Fazeli说:“这种聚类技术受到人类认知过程的启发,显著提高了机器人学习游戏的效率。让机器人建立数据集群,然后学习每个集群的模型,而不是学习一个能够捕捉所有可能性的模型。”

堆叠

研究者用模拟器MuJoCo,在计算机模拟的叠叠乐游戏中与其他如今最先进的机器学习算法进行比试,从而了解叠叠乐机器人在现实世界中的学习方式。

Oller说:“我们把我们系统获得的数据信息提供给这些算法,看它们是如何玩叠叠乐的。与我们的算法相比,这些算法需要搭建更大数量级的积木塔才能学会这个游戏。”

研究团队让叠叠乐机器人与人类志愿者进行了几次非正式比赛。

Oller说:“我们看到积木塔倒塌之前人类能抽出几个积木块,我们的机器人和人类不相上下。”

但是,叠叠乐机器人在与人类玩家进行正式比赛之前还有很长的路要走。除了物理交互,叠叠乐游戏还需要一些策略,比如抽出一块积木,既不使积木塔倒塌又能使对手很难抽出下一块积木。

目前,研究团队并不致力于让机器人获得叠叠乐冠军,他们更想把这一新技能应用到其他领域。

Rodriguez说:“我们用手完成的很多任务都是凭感觉,这种感觉来自力量和触觉反馈,我们的算法可以完成这类任务。”

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    211

    文章

    28455

    浏览量

    207267
  • 摄像头
    +关注

    关注

    60

    文章

    4845

    浏览量

    95782
  • 机械臂
    +关注

    关注

    12

    文章

    515

    浏览量

    24601

原文标题:有触觉,懂策略,能交互!MIT开发出比你更灵活的搭积木大师,还发了Science子刊

文章出处:【微信号:BigDataDigest,微信公众号:大数据文摘】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    【「具身智能机器人系统」阅读体验】2.具身智能机器人大模型

    需要专业程序员进行繁琐的编程工作,这种方式不仅效率低下,还限制机器人的应用场景。例如,在我们大学工程实训课程中使用的数控机床,需要人为设定起点、终点、移动方向和移动距离等参数,自动化程度非常有限。而
    发表于 12-29 23:04

    【「具身智能机器人系统」阅读体验】1.初步理解具身智能

    重要。 书中还详细介绍支持具身智能机器人的核心技术系统,包括自主机器人计算系统、感知系统、定位
    发表于 12-28 21:12

    【「具身智能机器人系统」阅读体验】1.全书概览与第一章学习

    了解具身智能机器人相关的知识,我感到十分荣幸和幸运。 全书简介 本书以循序渐进的方式展开,通过对具身智能机器人技术的全方位解析,帮助读者系统化地学习这一领域的核心知识。 首先在第一部分,介绍
    发表于 12-27 14:50

    【「具身智能机器人系统」阅读体验】+初品的体验

    《具身智能机器人系统》 一书由甘一鸣、俞波、万梓燊、刘少山老师共同编写,其封面如图1所示。 本书共由5部分组成,其结构和内容如图2所示。 该书可作为高校和科研机构的教材,为学生和研究人员提供系统
    发表于 12-20 19:17

    《具身智能机器人系统》第1-6章阅读心得之具身智能机器人系统背景知识与基础模块

    物理交互纳入智能系统的核心要素。 第3章是探讨机器人计算系统。这一章节详细阐述自主机器人的软硬件架构。计算
    发表于 12-19 22:26

    机器人回应华为合作传闻

    表示,公司并未发布过与华为在人形机器人领域进行合作的任何消息,因此无法对其他相关信息进行确认。他强调,所有关于机器人的最新动态和合作信息,都将通过公司的官方渠道进行发布和更新。 对
    的头像 发表于 12-05 13:53 352次阅读

    机器人回应与华为合作传闻:未发布相关信息

    近期,有传闻称华为特别选择机器人作为其人形机器人领域的本地生态合作伙伴,并计划于2025年发布并实现一定规模的量产。然而,对于这一传闻,
    的头像 发表于 12-04 11:21 494次阅读

    鸿蒙机器人与鸿蒙开发板联动演示

    鸿蒙机器人与鸿蒙开发板联动演示,机器人的角色为迎宾机器人,开发板负责人宾客出现监听
    发表于 12-02 14:55

    【书籍评测活动NO.51】具身智能机器人系统 | 了解AI的下一个浪潮!

    。 这些技术的综合应用使具身智能系统能够进行复杂的环境感知、决策制定和物理操作。例如,通过多模态感知技术,智能体能够综合视觉、 听觉和触觉数据,更全面地理解和响应其所处的环境。 具身智能通过提高机器人
    发表于 11-11 10:20

    ROS让机器人开发更便捷,基于RK3568J+Debian系统发布!

    本帖最后由 Tronlong创龙科技 于 2024-7-19 17:18 编辑 ROS系统是什么 ROS(Robot Operating System)是一个适用于机器人的开源的元操作系统。它
    发表于 07-09 11:38

    Al大模型机器人

    )大模型AI机器人采用中英文双语应用,目前的知识图谱包括金航标和萨科微所有的产品内容、应用场景、产品的家属参数等,热卖的型号S8050、TL431、SS8550、FR107、LM321、ZMM5V6
    发表于 07-05 08:52

    机器人与江苏亨通携手研发人形机器人专用线束

    近日,聚(深圳)机器人技术有限公司与江苏亨通集团达成重要战略合作,共同致力于人形机器人专用线束及相关线缆产品的研发工作。这一举措旨在推动人形机器人线材和线缆连接器的标准化与产业化,为
    的头像 发表于 06-19 09:33 841次阅读

    基于FPGA EtherCAT的六自由度机器人视觉伺服控制设计

    ,为工业自动化提供一套切实可行的方案。 本文针对基于机器视觉的工业机器人进行研究,主要工作包括以下几点: (1)设计基于 伊瑟特的六自由度
    发表于 05-29 16:17

    其利天下技术·搭载无刷电机的扫地机器人的前景如何?

    重要因素,如何提高电池效能和减少充电时间,是行业亟待解决的问题,此外还有噪音、智能控制等问题也需要重视。 在客户体验方面,扫地机器人还存在一些主要问题。例如,部分机器人在清洁过程中可能无法完全覆盖所有
    发表于 05-05 15:03

    华为云携手机器人,共探人形机器人智能新纪元

    近日,华为云计算技术有限公司与聚(深圳)机器人技术有限公司正式签署战略合作协议,标志着双方将共同开拓“华为盘古大模型+夸父人形机器人”的全新应用场景。此举不仅是华为云在人形机器人领域
    的头像 发表于 03-25 10:17 657次阅读