0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

研究人员让机器人理解和学习人类的双手动作 不只是模仿那么简单了

电子工程师 来源:yxw 2019-05-31 09:30 次阅读

如果机器人真的可以帮助我们在房子周围或照顾我们的受伤和老人,当然用两只手更方便,但是使用双手比我们想象起来困难得多。

来自威斯康星大学麦迪逊分校的研究团队的想法是,不要从头开始构建一个使用双手的机器人,而是简单地创建一个系统,让它能理解并执行与人类不需要思考就能完成的动作。

例如,当你需要打开一个罐子的时候,你用一只手抓住它,并把它移动到合适的位置,然后当另一只手抓住盖子并拧开它的时候,你就把那只手握紧。在这个基本的动作中发生了很多事情,现在要求机器人自动完成它是不可能的。但是那个机器人仍然可以大致了解为什么在这种情况下要进行这样的操作,并尽其所能去完成它。

四种动作

研究人员首先让人类佩戴动作捕捉设备执行各种模拟日常任务,如堆叠杯子,打开容器和倾倒物体,拾取物品,抽出夹在中间的物体。所有这些数据,包括手的动向,它们如何相互作用等等,都被机器学习系统学习和反思,最终发现了人们最倾向用手做的四种动作:

移交:这是你拿起一个物体放在另一只手中,这样就可以更容易地把它放在原处,或者腾出第一只手去做别的事情。

一只手固定:用一只手保持物体稳定,牢牢地抓握,而另一只手对其进行操作,如取下盖子或搅拌里面的物体。

固定偏移:双手协同工作以拾取并旋转或移动它。

单手搜索:实际上不是双手操作,而是在另一只手找到需要的对象或执行任务时故意让一只手不参与操作。

机器人运用这些知识不是为了做动作本身,这些是非常复杂的动作,目前的人工智能无法执行,而是为了解释人类控制器所做的动作。

你可能会认为,当一个人远程控制一个机器人时,它只会准确地反映出这个人的动作。在测试中,机器人这样做是为了提供一个基线,说明在不了解这些双手动作的情况下,它们是如何做到这一点的,但其中许多动作是根本不可能做到的。

重新解释人类动作

研究人员创建的系统会识别上述四种行为之一何时发生,并采取措施确保它们成功实现。这意味着,例如,当一起拿起一个水桶时,要意识到另一只手对每只手臂施加的压力。或者在另一只手与盖子相互作用时,为握着物体的手臂提供额外的刚性。即使只使用一只手(寻找任务),系统也知道它可以剥夺未使用的手的运动,并将更多的资源优先给工作中的手。

这些知识大大提高了远程操作员尝试执行一系列任务的成功率,任务旨在模拟准备早餐:打鸡蛋,搅拌,移动物品,拿起托盘,戴眼镜,并保持水平。

当然,这仍然是由人类或多或少完成的,但人类的行为正在被增强并重新解释,而不仅仅是简单的机械复制。

机器人自主完成这些任务还有很长的路要走,但这样的研究奠定了一些基础。在机器人试图像人类一样移动之前,它必须不仅要了解人类的移动方式,还要了解为什么他们在某些情况下会做某些事情,还有哪些重要的过程可能会被明显的观察隐藏起来,比如规划手的路线,选择抓握位置等。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    211

    文章

    28505

    浏览量

    207490
  • 人工智能
    +关注

    关注

    1792

    文章

    47420

    浏览量

    238933
  • 机器学习
    +关注

    关注

    66

    文章

    8425

    浏览量

    132766

原文标题:不只是模仿:研究人员让机器人理解和学习人类的双手动作

文章出处:【微信号:vision263com,微信公众号:新机器视觉】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    【「具身智能机器人系统」阅读体验】2.具身智能机器人的基础模块

    具身智能机器人的基础模块,这个是本书的第二部分内容,主要分为四个部分:机器人计算系统,自主机器人的感知系统,自主机器人的定位系统,自主机器人
    发表于 01-04 19:22

    开源项目!能够精确地行走、跳舞和执行复杂动作机器人—Tillu

    认识Tillu——机器人 Tillu是一款融合先进机器人技术与创造力的独特机器人,旨在激发学习与创新!它由运行Debian操作系统的UNIHIKER驱动,利用强大的控制系统实现逼真的
    发表于 01-02 17:24

    【「具身智能机器人系统」阅读体验】2.具身智能机器人大模型

    的设计不仅提高了机器人对环境的理解能力,还使其能够更精准地执行复杂任务。 扩散模型的新思路 除了大模型,扩散模型的引入为机器人控制开辟新的研究
    发表于 12-29 23:04

    【「具身智能机器人系统」阅读体验】1.初步理解具身智能

    需要理解环境,适应变化的环境。 从国际上来看,已经有不少科技公司发布自己的机器人产品,大多数应用在安保,物流,制造等场景。 中国在具身智能机器人领域的研发速度相对较慢,但经过多年的发
    发表于 12-28 21:12

    《具身智能机器人系统》第7-9章阅读心得之具身智能机器人与大模型

    将自然语言理解与运动规划融为一体。这种端到端的方法使机器人能够直接从人类指令生成动作序列,大幅简化了控制流程。该项目的工作流程包含设计并封装一个人
    发表于 12-24 15:03

    【「具身智能机器人系统」阅读体验】+数据在具身人工智能中的价值

    提供机器人环境和动作的统一和详细的理解。只有在这些过程之后,数据才能有效地用于训练 EAI 系统。 目前,应用 Sim2Real 技术的主要障碍是“现实差距”,即模拟环境与现实世界
    发表于 12-24 00:33

    【「具身智能机器人系统」阅读体验】+初品的体验

    《具身智能机器人系统》 一书由甘一鸣、俞波、万梓燊、刘少山老师共同编写,其封面如图1所示。 本书共由5部分组成,其结构和内容如图2所示。 该书可作为高校和科研机构的教材,为学生和研究人员提供系统
    发表于 12-20 19:17

    《具身智能机器人系统》第1-6章阅读心得之具身智能机器人系统背景知识与基础模块

    与环境持续互动来优化决策策略。书中还进一步讨论强化学习的基本原理,包括状态空间、动作空间、奖励函数的设计,以及策略网络的训练方法。 具身智能机器人系统是一个多学科知识交叉的复杂工程体
    发表于 12-19 22:26

    NVIDIA如何赋能机器人技术创新与应用

    近日,ROSCon China 2024在上海圆满落幕。作为全球机器人行业的重要盛会,为期两天的活动吸引众多 ROS 社区行业专家、研究人员、开发者和机器人爱好者的参与,展示
    的头像 发表于 12-10 14:56 321次阅读

    名单公布!【书籍评测活动NO.51】具身智能机器人系统 | 了解AI的下一个浪潮!

    机器人已经从简单模仿人类动作逐步过渡到赋予机器人更高级的自主决策能力。 国际上的科技巨头(如波士顿动力、特斯拉和软银)都在这一领域取得了显著
    发表于 11-11 10:20

    机器人技术的发展趋势

    能力。 机器人能够通过学习和训练,不断优化自身的行为和性能,实现更高效、更智能的工作。 自然语言处理与理解 : 随着自然语言处理技术的进步,机器人开始具备
    的头像 发表于 10-25 09:27 1093次阅读

    协作机器人拽拖示教详解

    用户友好的编程方式,允许操作员通过手动移动机器人的末端执行器(通常是机械臂的末端),来示范机器人执行特定任务或动作的方式。机器人会记录并
    的头像 发表于 10-23 15:52 237次阅读

    Al大模型机器人

    理解能力强大: AI大模型机器人可以理解和生成自然语言,能够进行复杂的对话和语言任务。它们能够识别语言中的语义、语境和情感,并据此作出适当的回应。广泛的知识储备: 这些模型基于大规模的数据集进行训练,拥有
    发表于 07-05 08:52

    视觉机器人焊接的研究现状

    视觉机器人焊接技术是将计算机视觉与机器人技术相结合,实现自动焊接过程中的实时检测、跟踪和控制。这一领域的研究一直处于不断发展之中,吸引众多研究人员
    的头像 发表于 04-02 15:34 539次阅读
    视觉<b class='flag-5'>机器人</b>焊接的<b class='flag-5'>研究</b>现状

    2024年机器人产业的九大要点

    人形机器人是具有与人类似的身体结构和运动方式(双足行走、双手协作等)的智能机器人
    的头像 发表于 01-22 15:42 1152次阅读