0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

机器视觉加速从2D走向3D

机器视觉 来源:机器视觉 作者:机器视觉 2022-11-25 10:29 次阅读

机器视觉是指利用相机、摄像机等传感器,配合机器视觉算法赋予智能设备人眼的功能,从而进行物体的识别、检测、测量等功能。机器视觉是在上世纪 50 年代从统计模式识别开始的,当时的工作主要集中在二维图像分析和识别。随着 5GAI 等技术的不断发展,行业应用需求的不断提升,机器视觉从二维向三维过渡不但成为可能,更是必须的方向。

机器视觉从2D进化到3D立体“视界”,常见常用的刷脸支付、Face ID、VR、无人便利店、智能机器人等产品技术,背后关键的科技便是3D视觉技术。

在过去几年里,3D视觉概念迭出,大量资本涌入这个赛道,新进企业众多。业内人士普遍认为,3D视觉在工业领域的产值和产出,可能要远远大于消费领域,但因为渗透率很低,推进速度不够快,当前3D工业相机的规模在几亿美金区间,设备和软件在20亿美金水平,但行业市场有50倍以上的渗透率增长空间。

从2D到3D的赛道变化2D技术起步较早,技术也相对成熟,在过去的30年中已被证明在广泛的自动化和产品质量控制过程中非常有效。

2D技术根据灰度或彩色图像中对比度的特征提供结果。2D适用于缺失/存在检测、离散对象分析、图案对齐、条形码和光学字符识别(OCR)以及基于边缘检测的各种二维几何分析,用于拟合线条、弧线、圆形及其关系(距离,角度,交叉点等)。

3D视觉利用近红外线光来扫描周围环境,再由CMOS图像传感器接收并转换为数字信号,最后通过芯片计算出物体在三维空间中的远近与相对位置,因此能了解物体的动作、与环境的互动,由此即能发展出由动作控制计算机的体感操控,检测出前方的物体等。

由于2D视觉逐渐无法满足对复杂对象识别和尺寸测量精度日益增加的要求,因此也催生了3D视觉的增长。从2D转向3D,需要所获取信息质量和数量的飞跃。相对来说,2D视觉市场积淀深,3D视觉方案只有达到一定的成熟度,才可以全面实现2D向3D的转变。

过去工业生产采用的机械臂都是盲取,闭着眼睛照着设定好的路径加工,没有更高阶的智慧判断。如果采用3D视觉后,就可以在更复杂的环境里更精准的夹取物件。业界认为,从2D到3D的过渡将成为继黑白到彩色,低分辨率到高分辨率以及静态图像到电影之后的第四次革命。

但是3D机器视觉技术门槛高,涉及到光学、结构、散热等跨学科设计问题,再加上芯片、算法构成的复杂系统设计,需要一定的技术实力,投入足够的时间和人才,才可以研发相关方案。技术门槛高、投入大、研发企业少都是3D视觉发展路上的拦路虎。

在3D视觉兴起之后,选择2D视觉还是3D视觉,成为一个有争议的问题。有业内人士表示,3D视觉将全面替代2D视觉;但也有观点认为,3D视觉价格高,在可以应用2D视觉的场合,没有必要用3D视觉;当然还有第三方观点认为,2D视觉和3D视觉可以融合应用。

就具体技术角度而言,2D颜色和3D几何数据的采集是从两个不同的物理通道进行的。

从落地来看,目前3D主要应用于大型工业制造业企业、物流、智慧城市监控,以及少部分消费应用场景等,从探索到突破,在落地的路上逐显繁荣。

3D视觉的不同技术形态目前市场上主流的有四种3D视觉技术,双目视觉、TOF、结构光3D成像和激光三角测量。

1.双目视觉双目技术是目前较为广泛的3D视觉系统,它的原理就像我们人的两只眼睛,用两个视点观察同一景物以获取在不同视角下的感知图像,然后通过三角测量原理计算图像的视差,来获取景物的三维信息 。

87634e92-6c10-11ed-8abf-dac502259ad0.png

由于双目技术原理简单,不需要使用特殊的发射器和接收器,只需要在自然光照下就能获得三维信息,所以双目技术具有系统结构简单、实现灵活和成本低的优点。适合于制造现场的在线、产品检测和质量控制,不过双目技术的劣势是算法复杂,计算量大,而且光照较暗或者过度曝光的情况下效果差。

8790d128-6c10-11ed-8abf-dac502259ad0.png

2.3D结构光技术

它通过一个光源投射出一束结构光,这结构光可不是普通的光,而是具备一定结构(比如黑白相间)的光线打到想要测量的物体上表面,因为物体有不同的形状,会对这样的一些条纹或斑点发生不同的变形,有这样的变形之后,通过算法可以计算出距离、形状、尺寸等信息从而获得物体的三维图像。

3. 激光三角测量法它基于光学三角原理,根据光源、物体和检测器三者之间的几何成像关系,来确定空间物体各点的三维坐标 。

87c53cce-6c10-11ed-8abf-dac502259ad0.png

通常用激光作为光源,用CCD相机作为检测器,具有结构光3D视觉的优点,精准、快速、成本低。

4. TOF飞行时间法成像技术

TOF是Time Of Flight的简写。它的原理通过给目标物连续发送光脉冲,然后用传感器接收从物体返回的光,通过探测光脉冲的飞行时间来得到目标物距离。

87f23846-6c10-11ed-8abf-dac502259ad0.png

TOF的核心部件是光源和感光接收模块,由于TOF是根据公式直接输出深度信息,不需要用类似双目视觉的算法来计算,所以具有响应快、软件简单、识别距离远的特点,而且由于不需要进行灰度图像的获取与分析,因此不受外界光源物体表面性质影响。典型的TOF 3D扫描系统每秒可测量物体上10,000至100,000个点的距离。不过TOF技术的缺点是:分辨率低、不能精密成像、而且成本高。

总的来说,无论是立体视觉、结构光、激光三角测量还是TOF,没有哪种技术是更好的,只有哪种技术是更适合的。

3D或将成为主流

机器人自动驾驶、金融支付已经体现出对3D视觉的强需求,当然,还有虚实相融的元宇宙,AR、VR等XR设备和3D交互需求已经率先凸显。这些需求带来了庞大的市场,但这也是极度碎片化的市场。

GGII数据显示,预计到2023年我国机器视觉市场规模将达到208.6亿元,其中3D视觉市场规模将达到34.28亿元,预计到2025年我国3D视觉市场规模将超过100亿元。在这个未来的百亿级市场中,3D视觉将趋于智能化、集成化、实时性、高性能、多场景应用等方向。

2D视觉虽为当前主流,但随着测量精度要求越来越高,被测物体条件越来越复杂,2D系统的缺陷也愈发突出,而3D视觉技术不断获得突破,在精度、灵活性和速度方面都是2D无可比拟的,所以3D机器视觉检测有取代2D系统的趋势,相信3D视觉未来将成为主流视觉系统。

881f3bf2-6c10-11ed-8abf-dac502259ad0.png

应用背景

OCR字符识别,是指对部件或产品上刻印的字符进行确认、辨别、判定的检测识别。此项技术目前已广泛应用于工业自动化生产的产品质量管理环节当中,企业通过为机器视觉检测设备安装OCR系统,快速完成对产品生产日期、保质期、生产批号、条码等字符信息的检测,从而更好地进行产品管理和追溯。

应用现状

作为机器视觉的典型应用方向,OCR的工作原理即为:通过工业相机、工业镜头拍摄字符图像,运用机器视觉软件进行相应处理分析,判定被检产品是否合格,并输出检测结果和相应信号

这其中,软件处理环节才是OCR技术真正的“用武之地”。常规的技术处理流程为:背景图像处理——字符切割——字符注册——字符识别与判断——结果输出。

实际的工业应用中,软件的处理过程

审核编辑:郭婷

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2548

    文章

    50646

    浏览量

    751776
  • 机器视觉
    +关注

    关注

    161

    文章

    4340

    浏览量

    120085

原文标题:机器视觉加速从2D走向3D/让计算机去理解获取数字图像与视频中的信息

文章出处:【微信号:www_51qudong_com,微信公众号:机器视觉】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    苏州吴中区多色PCB板元器件3D视觉检测技术

    3D视觉检测相较于2D视觉检测,有其独特的优势,不受产品表面对比度影响,精确检出产品形状,可以测出高度(厚度)、体积、平整度等。在实际应用中可以与2
    的头像 发表于 06-14 15:02 360次阅读
    苏州吴中区多色PCB板元器件<b class='flag-5'>3D</b><b class='flag-5'>视觉</b>检测技术

    英伦科技的15.6寸2D-3D可切换光场裸眼3D显示屏有哪些特点?

    随着科技的快速发展,人类对于视觉体验的追求也在不断攀升。平面的2D图像到立体的3D影像,我们一直在探索如何让虚拟世界更加逼真。如今,英伦科技凭借其创新实力,推出了一款革命性的显示设备
    的头像 发表于 05-28 11:17 328次阅读
    英伦科技的15.6寸<b class='flag-5'>2D-3D</b>可切换光场裸眼<b class='flag-5'>3D</b>显示屏有哪些特点?

    银牛微电子引领3D空间计算芯片前沿技术

    在此次活动上,银牛微电子有限责任公司的周凡博士指出,2D视觉已无法满足日益复杂的系统需求,因此我们需要引入更多维度来辅助机器人和智能设备更好地理解并融入真实环境,即从2D
    的头像 发表于 05-18 16:34 796次阅读

    通过2D/3D异质结构精确控制铁电材料弛豫时间

    受经典德拜弛豫启发的米勒模型提供了通过操纵弛豫时间来控制自发极化的理论框架。作者通过使用层转移技术形成的2D/C-3D/2D异质结构克服了传统异质结存在的铁电性恶化和能量损失的问题。
    的头像 发表于 04-29 10:27 570次阅读
    通过<b class='flag-5'>2D</b>/<b class='flag-5'>3D</b>异质结构精确控制铁电材料弛豫时间

    有了2D NAND,为什么要升级到3D呢?

    2D NAND和3D NAND都是非易失性存储技术(NVM Non-VolatileMemory),属于Memory(存储器)的一种。
    的头像 发表于 03-17 15:31 911次阅读
    有了<b class='flag-5'>2D</b> NAND,为什么要升级到<b class='flag-5'>3D</b>呢?

    Nullmax提出多相机3D目标检测新方法QAF2D

    今天上午,计算机视觉领域顶会CVPR公布了最终的论文接收结果,Nullmax感知部门的3D目标检测研究《Enhancing 3D Object Detection with 2D De
    的头像 发表于 02-27 16:38 1069次阅读
    Nullmax提出多相机<b class='flag-5'>3D</b>目标检测新方法QAF<b class='flag-5'>2D</b>

    高分工作!Uni3D3D基础大模型,刷新多个SOTA!

    我们主要探索了3D视觉中scale up模型参数量和统一模型架构的可能性。在NLP / 2D vision领域,scale up大模型(GPT-4,SAM,EVA等)已经取得了很impressive
    的头像 发表于 01-30 15:56 782次阅读
    高分工作!Uni<b class='flag-5'>3D</b>:<b class='flag-5'>3D</b>基础大模型,刷新多个SOTA!

    介绍一种使用2D材料进行3D集成的新方法

    美国宾夕法尼亚州立大学的研究人员展示了一种使用2D材料进行3D集成的新颖方法。
    的头像 发表于 01-13 11:37 1025次阅读

    一种用于2D/3D图像处理算法的指令集架构以及对应的算法部署方法

    二维(2D)和三维(3D)双模视觉信息在自动驾驶、工业机器人、人机交互等前沿领域具有广泛的应用前景。
    的头像 发表于 01-05 10:35 428次阅读
    一种用于<b class='flag-5'>2D</b>/<b class='flag-5'>3D</b>图像处理算法的指令集架构以及对应的算法部署方法

    一文了解3D视觉2D视觉的区别

    一文了解3D视觉2D视觉的区别 3D视觉2D
    的头像 发表于 12-25 11:15 2862次阅读

    2D3D视觉技术的比较

    作为一个多年经验的机器视觉工程师,我将详细介绍2D3D视觉技术的不同特点、应用场景以及它们能够解决的问题。在这个领域内,
    的头像 发表于 12-21 09:19 1055次阅读

    图漾科技发布3D工业视觉应用开发平台Vision++

    2023年12月20日,全球领先的3D机器视觉企业图漾科技发布了3D工业视觉应用开发平台Vision++,集成了简单易用的图形化低代码开发环
    的头像 发表于 12-20 16:46 815次阅读
    图漾科技发布<b class='flag-5'>3D</b>工业<b class='flag-5'>视觉</b>应用开发平台Vision++

    使用Python2D图像进行3D重建过程详解

    有许多不同的方法和算法可用于2D图像执行3D重建。选择的方法取决于诸如输入图像的质量、摄像机校准信息的可用性以及重建的期望准确性和速度等因素。
    的头像 发表于 12-05 14:07 2803次阅读
    使用Python<b class='flag-5'>从</b><b class='flag-5'>2D</b>图像进行<b class='flag-5'>3D</b>重建过程详解

    机器视觉系统组成 3D相机与2D相机的区别

    在以往的机器视觉领域通常是指2D视觉系统即通过摄像头拍到一个平面的照片然后通过图像分析或比对来识别物体,从而应用缺陷、瑕疵,位置、OCR,条形码等。
    发表于 11-30 14:42 1560次阅读
    <b class='flag-5'>机器</b><b class='flag-5'>视觉</b>系统组成 <b class='flag-5'>3D</b>相机与<b class='flag-5'>2D</b>相机的区别