0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

户外场景中,AGV厂商如何选择托盘识别3D视觉方案

移动机器人产业联盟 来源:维感科技 2023-05-31 15:52 次阅读

ToF(Time-of-Flight)感知技术VS主动双目视觉技术

随着工业自动化的发展,AGV(自动引导车)已成为物流自动化领域中的关键工具。较大规模的工厂、仓库和物流中心纷纷引入AGV,以实现物流流程的自动化和智能化,从而提高物流效率、准确性和安全性,同时减少人工操作的错误和劳动强度,为整体生产和物流管理水平的提升做出贡献。

在这一自动化系统中,机器视觉发挥着重要角色。首先,它能进行障碍物检测与避障,通过实时的图像处理和目标识别算法,AGV能够识别并确定周围环境中的障碍物,采取相应的避障动作,确保安全通行。其次,机器视觉在AGV的导航与定位中起到关键作用。AGV配备摄像头或激光雷达等传感器,通过识别地标或标记物,确定自身的位置和方向,从而提供准确的导航信息,帮助AGV规划路径并精确到达目标位置。此外,机器视觉还用于识别和处理货物。AGV搭载视觉系统,能够识别货物或条码(二维码),确定货物的类型、数量和目的地,实现自动化的负载识别与处理。

近些年迅猛发展的3D视觉技术已成为AGV领域的关键技术之一,进一步提升AGV智能化水平的同时,也实现了更高效、准确和安全的物流操作。在户外环境中,用于AGV托盘或货物识别最常见的两种3D视觉技术分别是主动双目视觉技术和ToF(Time-of-Flight)感知技术,两种3D视觉技术均可用于物体深度信息的快速捕捉,但在性能表现中,依然存在一些差别,本文选择了全球知名的主动双目相机标杆产品与维感科技Vzense DS系列的相机在户外强光2米距离范围内,进行了成像效果对比测试,供大家参考与选型。

01

技术原理与代表产品

双目视觉技术

a3788962-fefa-11ed-90ce-dac502259ad0.png

双目视觉技术由两个相机组成,分别模拟人类的双眼,通过三角测距法计算物体到相机的距离。这两个相机被安装在一定的距离上,以获得不同的视角,通过同时捕捉同一场景的左右两个图像,并分析这些图像之间的视差(两个图像中对应点之间的位移),可以计算出场景中物体的深度信息。为提高数据准确性,往往在双目视觉技术基础上搭配主动投射特殊图形的光源,如红外光或结构光。通过分析左右两个图像之间的视差和光场的变化,计算出物体的深度信息,全球知名代表产品有Intel RealSenseTM D400系列与ZED Stereo相机。

a38074c4-fefa-11ed-90ce-dac502259ad0.png

IntelRealSenseTMD435(Intel官网图片)

ToF(Time-of-Flight)相机技术

a385c9f6-fefa-11ed-90ce-dac502259ad0.gif

ToF(Time-of-Flight)技术的原理是由ToF模组的光源向被测对象发出光子,在抵达被测对象并通过图像传感器接收反射回到ToF模组的光子,计量此段“光的飞行时间”,在光速已知的前提下,即可得到距离数据。ToF相机技术是以光学系统为接受路径的面阵一次性成像,非扫描式3D成像深度信息捕捉技术,全球知名代表产品有微软Azure Kinect,Lucid Helios与Basler Blaze。维感科技作为国内迅速发展起来的工业级ToF相机技术研发与生产企业,亦推出了基于Sony ToF芯片,极具性价比的Vzense DS系列。

a3906a3c-fefa-11ed-90ce-dac502259ad0.png

Azure Kinect DK

(Microsoft官网图片)

a396119e-fefa-11ed-90ce-dac502259ad0.png

维感科技Vzense DS系列

02

户外测试数据对比

户外场景与低反射率物体的识别,一直都是AGV目标物识别的难点,强烈的光照会使图像采集时光强度骤升,物体局部过曝,或产生较大明暗差,导致图像质量下降,丢失物体细节,进而影响距离值的计算与识别的准确性。而黑色物体(如包裹,托盘,货架)会因其超低反射率的原因,导致相机难以捕捉到较高质量的距离数据。 针对这个常见的AGV识别痛点,进行了下述性能对比测试:

测试条件:户外,正午,太阳光直射,光照强度约60,000Lux

被测物体:1m*1.2m的黑色与蓝色托盘

相机机型:某主动双目相机与维感科技Vzense DS系列

a3a08c00-fefa-11ed-90ce-dac502259ad0.png

测试场景实拍图

对比测试一:

分别拍摄1米与1.5米距离处,相机正对与侧对黑色托盘时的点云数据对比

1000mm处-正面 1500mm处– 侧面
某主动双目相机

a3aa8106-fefa-11ed-90ce-dac502259ad0.png

a3b56454-fefa-11ed-90ce-dac502259ad0.png

VzenseDS77

a3bb8712-fefa-11ed-90ce-dac502259ad0.png

a3c5fc42-fefa-11ed-90ce-dac502259ad0.png

对比测试二:

分别拍摄1米与2米距离处,相机正对与侧对蓝色托盘时的点云数据对比

1000mm-正面 1000mm–侧面 2000mm-正面
某主动双目相机

a3cd2d32-fefa-11ed-90ce-dac502259ad0.png

a3d27cf6-fefa-11ed-90ce-dac502259ad0.png

a3d9e9be-fefa-11ed-90ce-dac502259ad0.png

VzenseDS77

a3e28736-fefa-11ed-90ce-dac502259ad0.png

a3eb9d12-fefa-11ed-90ce-dac502259ad0.png

a3f103d8-fefa-11ed-90ce-dac502259ad0.png

对比测试三:

分别拍摄1米距离处的黑色托盘与蓝色托盘,相机正对托盘时的点云数据放大后的平整度情况对比

黑色托盘 蓝色托盘
某主动双目相机

a3f6108a-fefa-11ed-90ce-dac502259ad0.png

a3fd7aaa-fefa-11ed-90ce-dac502259ad0.png

VzenseDS77

a4060dbe-fefa-11ed-90ce-dac502259ad0.png

a41d72ba-fefa-11ed-90ce-dac502259ad0.png

综合上述多组测试对比数据容易看出,在户外1~2米测量距离处,维感科技Vzense DS77 ToF相机产品拥有更好的抗光性,数据稳定性与平整度,更加适合AGV在户外场景中进行托盘与货物识别。这不仅得益于Vzense DS系列搭载了性能卓越的Sony ToF芯片,将高精度检测反射光相位的像素技术CAPD与背照式CMOS图像传感器高速像素技术结合,更得益于维感科技团队多年来专注于ToF感知技术,将多频模式与高动态范围(HDR)技术融入到产品设计中,通过捕捉多个不同频率与多个不同曝光时间的方式获得图像,使得复杂场景中的深度数据也可以精确到毫米级别。

03

VZENSEDS系列户外成功案例分享

应用案例一:AGV叉车托盘识别与避障Vzense ToF相机已成功集成在多品牌AGV产品中,AGV叉车利用ToF相机提供的深度信息,识别不同明暗环境中的托盘、货物、障碍物等,AGV可以安全准确地识别物品、拾取并运输到目的地。

a42548b4-fefa-11ed-90ce-dac502259ad0.png

a42d8d1c-fefa-11ed-90ce-dac502259ad0.png

应用案例二:农业AMR自主移动机器人

Vzense RGB-D ToF相机安装于农业AMR,用于识别水果或农作物的大小与颜色,从而判断其成熟度,助力智慧农业。Vzense ToF相机在海外多个农业AMR产品上,均有批量出货且在户外强光/黑暗中应用的案例。

a43762ba-fefa-11ed-90ce-dac502259ad0.png

a4415b80-fefa-11ed-90ce-dac502259ad0.png

应用案例三:混凝土车泵协同Vzense ToF相机可获取堆积物的点云数据,从而计算仓库物料、农作物、砂石、饲料等堆积物的库存或使用情况。如下图所示,国内某知名集团的混凝土车泵协同系统,将Vzense ToF相机应用在出料筛网过程中检测水泥浆的高度,从而自动控制水泥浆出料的速度,真正实现无人操控。

a44be0f0-fefa-11ed-90ce-dac502259ad0.png

应用案例四:箱口/砂口/油罐口等位置识别

将Vzense ToF相机安装在顶端,识别箱口、砂口、油罐口的准备坐标信息后,导引设备移动到目标位置,使得装载过程更为精准与高效,实现自动化装卸。

a4577e2e-fefa-11ed-90ce-dac502259ad0.png

04

维感科技VzenseDS系列新品介绍

DS86&DS87

工业级RGB-D TOF深度相机DS系列

轻量化设计,结构紧凑,尺寸更小,重量更轻

侧出口设计使安装和使用更加便捷

IP42/IP67防水防尘等级可选,满足复杂环境需求

优化RGB解像力,更清晰的彩色图像显示

RGB图像与深度图像微秒级同步,实时捕获物体三维数据

支持 DepthHDR模式以获取高对比度和复杂场景中的数据

受环境光照影响小,可在强光和黑暗中无障碍识别

软/硬触发模式,支持多相机同时工作

a45fade2-fefa-11ed-90ce-dac502259ad0.png

审核编辑 :李倩

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AGV
    AGV
    +关注

    关注

    27

    文章

    1308

    浏览量

    41090
  • 3D视觉
    +关注

    关注

    4

    文章

    433

    浏览量

    27526

原文标题:户外场景中,AGV厂商如何选择托盘识别3D视觉方案

文章出处:【微信号:robotinside2014,微信公众号:移动机器人产业联盟】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    洛微科技3D视觉引导软包拆垛解决方案

    方案概述在多个行业,货物转运和柔性生产线至关重要。传统人工或简单机械拆垛方式效率低下,易出错,难以适应大规模、高频次的货物处理需求。因此,基于3D视觉的软包拆垛技术应运而生,它能精准
    的头像 发表于 12-04 15:31 123次阅读
    洛微科技<b class='flag-5'>3D</b><b class='flag-5'>视觉</b>引导软包拆垛解决<b class='flag-5'>方案</b>

    雷曼康硕展1250㎡户外裸眼3D大屏焕新马来西亚商圈

    近日,雷曼康硕展1250㎡户外裸眼3D大屏亮相马来西亚武吉免登PAVILION购物中心。这块巨型裸眼3D大屏呈现出生动立体的画面,超震撼的视觉冲击力吸引了众多游客驻足围观,让这一商圈焕
    的头像 发表于 08-05 11:05 509次阅读

    3D视觉引导的多SKU纸箱拆解

    在物流和包装行业,处理多种SKU纸箱的拆解是一个常见的操作难题。传统方法往往因为纸箱的尺寸、形状和重量多样性而遇到困难。为了解决这个问题,富唯智能提出了一种基于3D视觉引导的SKU纸箱拆解解决
    的头像 发表于 07-05 18:11 612次阅读
    <b class='flag-5'>3D</b><b class='flag-5'>视觉</b>引导的多SKU纸箱拆解

    奥比3D相机打造高质量、低成本的3D动作捕捉与3D动画内容生成方案

    高质量、低成本的3D动作捕捉与3D动画内容生成方案。 Moverse公司总部位于希腊塞萨洛尼基,是三维动画相关媒体和娱乐行业的一家科技创业公司。基于奥比
    的头像 发表于 06-25 16:37 1080次阅读

    OpenCV携奥比3D相机亮相CVPR 2024

    6月17日-21日,奥比光合作伙伴OpenCV携Orbbec 3D相机参展在美国西雅图举办的CVPR 2024(即IEEE国际计算机视觉与模式识别会议),让开发者亲身体验Orbbec
    的头像 发表于 06-21 09:38 574次阅读

    苏州吴中区多色PCB板元器件3D视觉检测技术

    3D视觉检测相较于2D视觉检测,有其独特的优势,不受产品表面对比度影响,精确检出产品形状,可以测出高度(厚度)、体积、平整度等。在实际应用
    的头像 发表于 06-14 15:02 413次阅读
    苏州吴中区多色PCB板元器件<b class='flag-5'>3D</b><b class='flag-5'>视觉</b>检测技术

    AGV导航精度怎么更准确?利用3D相机打造更智能的AGV辅助系统

    AGV工业4.0通过优化流程和引入机器人系统提高生产力和灵活性。物联网增强了机器人的灵敏度和操作性。3D相机技术使AGV能精准识别环境、构建地图、定位和运动规划,提升操作精确度和效率,
    的头像 发表于 06-12 16:51 415次阅读
    <b class='flag-5'>AGV</b>导航精度怎么更准确?利用<b class='flag-5'>3D</b>相机打造更智能的<b class='flag-5'>AGV</b>辅助系统

    3D视觉引导方案解决工厂产线上下料难题

    3D视觉引导方案,下料器的摆放精度直接关系到产品的最终质量和生产效率。如何在繁忙的生产线上,确保下料器能够精准无误地将工件放置在指定位置,成为了摆在我们面前的一大挑战。今天,我们就来揭秘我们的
    的头像 发表于 05-27 15:47 423次阅读
    <b class='flag-5'>3D</b><b class='flag-5'>视觉</b>引导<b class='flag-5'>方案</b>解决工厂产线上下料难题

    机器人3D视觉引导系统框架介绍

    通过自主开发的3D扫描仪可获准确并且快速地获取场景的点云图像,通过3D识别算法,可实现在对点云图中的多种目标物体进行识别和位姿估计。
    发表于 04-29 09:31 335次阅读
    机器人<b class='flag-5'>3D</b><b class='flag-5'>视觉</b>引导系统框架介绍

    奥比光携多款3D相机深度参与国内3D视觉最高规格会议

    4月19日-21日,国内3D视觉最高规格会议China 3DV 2024大会在深圳举行。奥比光作为大会铂金赞助商,携多款不同技术路线的3D
    的头像 发表于 04-24 09:26 451次阅读
    奥比<b class='flag-5'>中</b>光携多款<b class='flag-5'>3D</b>相机深度参与国内<b class='flag-5'>3D</b><b class='flag-5'>视觉</b>最高规格会议

    解决方案|基于3D视觉技术的铝合金板件刷油烘干自动化上下料

    针对铝合金板件刷油烘干上下料过程的自动化需求,我们提出了一套基于3D视觉引导的解决方案。该方案通过引入先进的
    的头像 发表于 04-20 17:45 330次阅读
    解决<b class='flag-5'>方案</b>|基于<b class='flag-5'>3D</b><b class='flag-5'>视觉</b>技术的铝合金板件刷油烘干自动化上下料

    工业自动化,3D视觉在五金件上下料中的应用

    3D视觉引导五金件上下料是一种先进的自动化解决方案,结合了3D视觉技术和机器人技术,实现对五金件的高效、准确上下料操作。以下是关于
    的头像 发表于 02-21 11:38 491次阅读
    工业自动化,<b class='flag-5'>3D</b><b class='flag-5'>视觉</b>在五金件上下料中的应用

    高分工作!Uni3D3D基础大模型,刷新多个SOTA!

    我们主要探索了3D视觉scale up模型参数量和统一模型架构的可能性。在NLP / 2D vision领域,scale up大模型(GPT-4,SAM,EVA等)已经取得了很imp
    的头像 发表于 01-30 15:56 879次阅读
    高分工作!Uni<b class='flag-5'>3D</b>:<b class='flag-5'>3D</b>基础大模型,刷新多个SOTA!

    3D视觉引导3C薄片自动化上料

    3D视觉引导3C薄片自动化上料 在当今高度自动化的制造环境,精确、高效地处理薄片类零件至关重要。特别是在3C行业,如手机、电脑等产品的制
    的头像 发表于 01-30 11:13 531次阅读
    <b class='flag-5'>3D</b><b class='flag-5'>视觉</b>引导<b class='flag-5'>3</b>C薄片自动化上料

    ad3d封装放到哪个层

    在广告3D封装通常放置在视觉设计层。视觉设计是广告至关重要的一个层面,通过图像、颜色和排版等视觉
    的头像 发表于 01-04 15:05 1055次阅读