0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

目前几种主流的机器人智能抓取系统方案

新机器视觉 来源:新机器视觉 2023-11-14 14:20 次阅读

机器人学习中的经典问题之一便是分拣:在一堆无序摆放的物品堆中,取出目标物品。在快递分拣员看来,这几乎是一个不需要思考的过程,但对于机械臂而言,这意味着复杂的矩阵计算。

事实上,对于人类需要耗费大量时间的数理难题,用智能系统处理起来就显得十分容易,但在几乎不需要思考的情况下就能做出的分选动作,则是全世界机机器人研究专家关注的热点。

a8e3b0dc-82a0-11ee-939d-92fbcf53809c.jpg

机械臂抓取需要确定每段机械臂的位姿

首先,机械臂需要视觉伺服系统,来确定物体的位置,根据末端执行器(手)和视觉传感器(眼)的相对位置,可分为Eye-to-HandEye-in-Hand两种系统。

Eye-to-Hand的分离式分布,视野固定不变,如果相机的标定精度高的话,那么视觉定位于抓取的精度也越高。

Eye-in-Hand则将机械臂与视觉传感器固定在一起,视野随机械臂的移动而改变,传感器越近时精度越高,但过于靠近时则可能使目标超出视野范围。

a8f8b75c-82a0-11ee-939d-92fbcf53809c.jpg

精密的视觉系统与灵活机械臂的配合,才能完成一次完美的抓取,而这正是当前机器人操作中的核心难题,归纳起来就是这么一件事:找到合适的抓取点(或吸附点),抓住它。之后的转运执行,则属于运动规划的分支。

目前几种主流的解决方案

Model-based(基于模型的方法)

这种方法很好理解,即知道要抓什么,事先采用实物扫描的方式,提前将模型的数据给到机器人系统,机器在实际抓取中就只需要进行较少的运算:

1. 离线计算:根据搭载的末端类型,对每一个物体模型计算局部抓取点;

2. 在线感知:通过RGB或点云图,计算出每个物体的三维位姿;

3. 计算抓取点:在真实世界的坐标系下,根据防碰撞等要求,选取每个物体的最佳抓取点。

RGB颜色空间由红绿蓝三种基本色组成,叠加成任意色彩,同样地,任意一种颜色也可以拆解为三种基本色的组合,机器人通过颜色坐标值来理解“颜色”。这种方式与人眼识别颜色的方向相似,在显示屏上广泛采用。

Half-Model-based(半模型的方法)

在这种训练方式中,不需要完全预知抓取的物体,但是需要大量类似的物体来训练算法,让算法得以在物品堆中有效对图像进行“分割”,识别出物体的边缘。这种训练方式,需要这些流程:

1.离线训练图像分割算法,即把图片里的像素按物体区分出来,此类工作一般由专门的数据标注员来处理,按工程师的需求,标注出海量图片中的不同细节;

2.在线处理图像分割,在人工标注出的物体上,寻找合适的抓取点。

这是一种目前应用较为广泛的方式,也是机械臂抓取得以推进的主要推力。机械臂技术发展缓慢,但计算机视觉的图像分割则进展迅速,也从侧面撬动了机器人、无人驾驶等行业的发展。

a92d4f58-82a0-11ee-939d-92fbcf53809c.jpg

Model-free(自由模型)

这种训练方式不涉及到“物体”的概念,机器直接从RGB图像或点云图上计算出合适的抓取点,基本思路就是在图像上找到Antipodal(对映点),即有可能“抓的起来”的点,逐步训练出抓取策略。这种训练方式往往让机器手大量尝试不同种类的物品,进行self-supervisedlearning,Google的Arm Farm,即为其中的代表之一。

值得注意的是,对于机械手而言,不同形状的物品,抓取难度有天壤之别。即便是同样形状的物体,由于表面反光度和环境光照的影响,在不同场景的抓取难度也大相径庭。从实验室到商业落地,其中有相当一段路要走。

高精密度的相机研发,是机器人“感知”物体的第一步。

实际商业场景中,最麻烦的物体总是“下一个物体”。工业机器人要真正融入实际生产体系,只有具备聪明的大脑,针对不同工况做出柔性的调整,才能拓宽工业机器人的使用场景。







审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    211

    文章

    28389

    浏览量

    206942
  • RGB
    RGB
    +关注

    关注

    4

    文章

    798

    浏览量

    58463
  • 视觉传感器
    +关注

    关注

    3

    文章

    249

    浏览量

    22872
  • 伺服系统
    +关注

    关注

    14

    文章

    572

    浏览量

    39206
  • 计算机视觉
    +关注

    关注

    8

    文章

    1698

    浏览量

    45980

原文标题:机器人智能抓取系统:目前几种主流的解决方案

文章出处:【微信号:vision263com,微信公众号:新机器视觉】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    【「具身智能机器人系统」阅读体验】+初品的体验

    《具身智能机器人系统》 一书由甘一鸣、俞波、万梓燊、刘少山老师共同编写,其封面如图1所示。 本书共由5部分组成,其结构和内容如图2所示。 该书可作为高校和科研机构的教材,为学生和研究人员提供
    发表于 12-20 19:17

    《具身智能机器人系统》第1-6章阅读心得之具身智能机器人系统背景知识与基础模块

    、谷歌的RT系列等前沿产品中展露锋芒。这些突破性成果标志着AI正从虚拟世界迈向物理世界的深度交互。 而研读《具身智能机器人系统》前六章,我对具身智能(Embodied Artifici
    发表于 12-19 22:26

    智能移动机器人系统方案指南

    至 48 V 之间。根据所采用的技术和预期用途,此类机器人系统可以与人类进行不同程度的交互,比如在人员周围安全运作,与人员进行高效的合作和协同工作。为帮助工程师更好地解决设计难题,智能移动
    的头像 发表于 11-14 10:30 346次阅读
    <b class='flag-5'>智能</b>移动<b class='flag-5'>机器人</b><b class='flag-5'>系统</b><b class='flag-5'>方案</b>指南

    【书籍评测活动NO.51】具身智能机器人系统 | 了解AI的下一个浪潮!

    。 这些技术的综合应用使具身智能系统能够进行复杂的环境感知、决策制定和物理操作。例如,通过多模态感知技术,智能体能够综合视觉、 听觉和触觉数据,更全面地理解和响应其所处的环境。 具身智能
    发表于 11-11 10:20

    智能移动机器人

    富唯智能移动机器人分为复合机器人和转运机器人,搭载ICD核心控制器,实现一体化控制,最快可实现15分钟现场机器人的快速部署,无缝对接产线,配
    的头像 发表于 08-27 17:22 334次阅读
    <b class='flag-5'>智能</b>移动<b class='flag-5'>机器人</b>

    水星Mercury X1轮式人形机器人结合openc算法&STag标记码视觉系统实现精确抓取

    本案例展示了如何利用视觉系统提升机械臂的抓取精度,成功实现了人形机器人的双臂抓取不在局限于单臂抓取。 引言 如今市面上已经有了许多不同类型的
    的头像 发表于 08-12 11:02 1448次阅读
    水星Mercury X1轮式人形<b class='flag-5'>机器人</b>结合openc算法&STag标记码视觉<b class='flag-5'>系统</b>实现精确<b class='flag-5'>抓取</b>!

    ROS让机器人开发更便捷,基于RK3568J+Debian系统发布!

    化的快速发展,智能机器人设备已成为工业自动化体系的佼佼者,而智能机器人设备核心—ROS系统,是机器人
    发表于 07-09 11:38

    工业机器人视觉技术的应用分为哪几种?

    机器人可以识别和定位物体的位置、形状、颜色等特征。这些信息可以用于机器人的导航、抓取、装配等任务。 1.1 颜色识别 颜色识别是物体识别的一种常见方法。通过分析物体表面的颜色信息,机器人
    的头像 发表于 07-09 09:38 685次阅读

    Al大模型机器人

    )大模型AI机器人采用中英文双语应用,目前的知识图谱包括了金航标和萨科微所有的产品内容、应用场景、产品的家属参数等,热卖的型号S8050、TL431、SS8550、FR107、LM321、ZMM5V6
    发表于 07-05 08:52

    码垛机器人的组成和工作原理

    几个部分组成:  1、机身:码垛机器人的机身通常由机械臂、底座、控制系统等部件组成,用于支撑和移动物品。  2、抓取机构:码垛机器人抓取
    的头像 发表于 07-04 15:58 439次阅读

    基于FPGA EtherCAT的六自由度机器人视觉伺服控制设计

    ,为工业自动化提供了一套切实可行的方案。 本文针对基于机器视觉的工业机器人进行研究,主要工作包括以下几点: (1)设计了基于 伊瑟特的六自由度机器人视觉伺服控制
    发表于 05-29 16:17

    富唯智能案例|3D视觉引导机器人抓取鞋垫上下料

    随着制造业对自动化、智能化需求的不断提升,如何实现鞋垫上下料的精准、高效操作成为了企业亟待解决的问题。传统的上下料方式往往依赖人工,存在效率低下、精度不足等问题。而富唯智能的3D视觉引导机器人
    的头像 发表于 04-08 16:57 404次阅读
    富唯<b class='flag-5'>智能</b>案例|3D视觉引导<b class='flag-5'>机器人</b><b class='flag-5'>抓取</b>鞋垫上下料

    机器人学习中主流智能抓取方案

    RGB颜色空间由红绿蓝三种基本色组成,叠加成任意色彩,同样地,任意一种颜色也可以拆解为三种基本色的组合,机器人通过颜色坐标值来理解“颜色”。
    发表于 03-13 10:07 298次阅读
    <b class='flag-5'>机器人</b>学习中<b class='flag-5'>主流</b><b class='flag-5'>智能</b><b class='flag-5'>抓取</b><b class='flag-5'>方案</b>

    富唯智能机器人集成了协作机器人、移动机器人和视觉引导技术

    富唯智能移动机器人是一款拥有自主导航能力和物料转移抓取功能的智能机器人,采用先进的无线通信技术和高精度传感器,能够实现自主导航和避障,完成生
    的头像 发表于 01-17 11:58 431次阅读

    EPSON爱普生助力智能泳池清洁机器人导航方案应用

    智能泳池清洁机器人导航方案目前泳池清洁机器人成为一个新的热点赛道,许多公司都在此新领域投入研发,其中主要为曾经从事家用扫地机的相关公司,因为泳池清洁
    的头像 发表于 12-26 08:29 682次阅读
    EPSON爱普生助力<b class='flag-5'>智能</b>泳池清洁<b class='flag-5'>机器人</b>导航<b class='flag-5'>方案</b>应用