0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

墨鱼眼睛启发的人工视觉,可在不均匀的照明条件下实现高质量成像

MEMS 来源:MEMS 2023-02-22 11:02 次阅读

人工视觉可以在移动机器人中发挥关键作用,包括自动驾驶汽车,以监控周围环境并检测接近的物体以避免碰撞,这可以部分或完全替代在不断变化的光线条件下易受伤害的人类视觉。对于此类应用,物体的高可检测性很重要,这通常需要高对比度和高敏锐度的成像系统。基于相机的视觉系统因其低成本、小尺寸和单次图像捕获能力,支持图像检测。然而,有限的图像对比度,特别是在垂直不均匀的照明条件下,由于上视野中的强烈阳光散射和从周围玻璃表面反射的随机偏振太阳光噪声,严重阻碍了高质量成像,从而导致物体可检测性低。而汽车驾驶员可以通过遮阳板和太阳镜物理阻挡强烈的上部阳光并减轻偏振噪音。这有用于移动机器人和自动驾驶汽车的人工视觉系统利用基于软件的方法来解决这种不利的光照条件。然而,系统应处理的大量视觉信息需要很高的计算能力和能耗。因此,需要适当的硬件解决方案来处理非均匀的光条件,最大限度地减少偏振光噪声,并减少数据处理量。

同时,自然界中的视觉系统激发了具有独特功能的人工视觉系统的发展。例如,水生和两栖动物已经进化到具有针对其栖息地优化的眼睛,这些都激发了各种人工视觉系统。受鱼眼全景成像能力的启发,开发了由单中心透镜和半球形硅纳米棒光电二极管阵列组成的小型化宽视场(FOV)成像系统。受象鼻鱼(Gnathonemus petersii)的视网膜结构的启发,它可以增强在低光条件下收集的光强度,已经开发出一种由微量光收集器组成的光敏增强剂。受螳螂虾(如齿趾虾)的高光谱和极化成像策略的启发,已经开发出一种由偏振敏感有机光电探测器和折叠聚合物缓凝剂组成的图像传感器。受生活在潮间带地区的提琴蟹(Uca arcuata)的扁平角膜微透镜和柄眼结构的启发,已经开发出一种具有360°FOV的全天候成像系统,该系统由多层扁平微透镜和球形硅光电二极管阵列组成。尽管为开发各种生物启发的人工视觉系统做出了这样的努力,但尚未开发出一种可以平衡垂直不均匀照明,同时在由于随机偏振阳光的高噪声条件下实现高对比度和敏锐度的系统。

0c6eceec-b246-11ed-bfe3-dac502259ad0.png

在这种情况下,墨鱼(棕褐色属)已经进化为具有针对垂直不均匀照明和偏振光检测优化的高敏锐度视觉系统(分别为图1,A和B),激发了移动机器人的高性能人工视觉。墨鱼具有独特的眼睛结构,由W形瞳孔(图2A i),单个球形晶状体(图2A ii)和弯曲的视网膜(图2A iii)组成,具有高密度带状感光器区域(图2B)和偏振敏感光感受器(图2B,右插图)。在白天,独特的W形瞳孔通过平衡垂直不均匀的照明使墨鱼具有高对比度的视力(图1A,红色虚线区域)。视网膜中的高密度带状感光器区域允许其感兴趣区域(ROI)具有高视力(图1A,ii与i)。这种带状感光器分布是检测地平线附近接近物体的最佳选择。此外,光感受器的水平或垂直堆叠的微绒毛允许墨鱼通过提取从目标物体反射的偏振光并过滤掉随机偏振的背景噪声来有效地识别伪装的猎物(图1B,ii与i),从而增强视觉对比度。

0cbd6ad4-b246-11ed-bfe3-dac502259ad0.png

受墨鱼视觉系统这种独特的结构和功能特征的启发,研究人员提出了一种人工视觉系统,该系统可在垂直不均匀的照明条件下实现高对比度和高敏锐度成像,以实现高性能人工视觉,从而有望在移动机器人中应用。人工视觉系统中的W形瞳孔通过减少垂直FOV顶部的入射光来补偿不均匀的垂直光分布。此外,圆柱形硅光电二极管阵列(c-Si-PDA)包括高密度带状像素区域,可在ROI中实现高敏锐度成像。集成在c-Si-PDA表面的柔性碳纳米管(CNT)-偏振膜(FCPF)在可见光波长范围内保持~78%的平均偏振度,从而实现偏振敏感成像。通过集成这些光学电子元件,开发了一种人工视觉系统,该系统可以平衡不均匀的光分布,同时实现高对比度和敏锐度。

0cfe1e94-b246-11ed-bfe3-dac502259ad0.png

论文信息:
https://www.science.org/doi/10.1126/scirobotics.ade4698

审核编辑 :李倩

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 成像系统
    +关注

    关注

    2

    文章

    191

    浏览量

    13897
  • 光电探测器
    +关注

    关注

    4

    文章

    262

    浏览量

    20436
  • 人工视觉
    +关注

    关注

    0

    文章

    10

    浏览量

    2551

原文标题:墨鱼眼睛启发的人工视觉,可在不均匀的照明条件下实现高质量成像

文章出处:【微信号:MEMSensor,微信公众号:MEMS】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    LITESTAR 4D应用:温室植物照明案例

    设计意义 现如今,越来越多的人工光源改变照明模式,使得植物照明的发展趋势越来越迅速。这种设计的意义是:提升光能利用率,照明促进植物高效高质量成
    发表于 08-13 17:57

    不均匀性的定义 PPT学习资料

    不均匀性的定义可以这样说:组成系统是由传输线+功能电路,这中间会遇到大量的不均匀性或者说不连续性。对于不均性的研究有两个方面,不均匀性分析方法和不均
    发表于 11-02 17:13

    OMNIVISION DSC等级的高质量成像产品

    lux),同时堆叠高度也是世界最小,非常适合用于时下流行的超薄手机。另外,此设备具备自动影像控制功能以及视频编码的高帧率,即使在最严苛的光线条件下,也能带来生动鲜活的静态和视频影像。  1.75
    发表于 10-30 17:04

    矩阵式LED的显示亮度不均匀

    亮的效果(比如点亮LED2 LED 4 LED6 LED8 LED11 LED12)刷新6次;然后,发现亮度不够,并且显示起来亮度不均匀,然后又尝试了行列式点亮,也是亮度不均匀,其实单独做个LED显示
    发表于 12-17 08:41

    VHDL小源程序平均频率输出不均匀

    一.积分分频(小数分频)注:只是对平均频率,输出不均匀。library ieee; use ieee.std_logic_1164.all; use
    发表于 02-20 06:35

    基于不均匀密度的自动聚类算法

    针对基于密度的聚类算法不能自动处理密度分布不均匀的数据问题,提出一种基于不均匀密度的自动聚类算法。该算法既保持了一般基于密度算法的优点,也能有效地处理分布不均
    发表于 04-09 09:39 16次下载

    应用于工业检测的光照不均匀图像的校正

    文中提出利用低通滤波的方法实现对光照不均匀图像的校正。该方法的理论依据是在对照明光场的频谱特性进行分析的基础上提出的;接着将滤波器的设计作为重点,针对参数选
    发表于 01-15 11:47 15次下载

    照度不均匀图像的自动Gamma灰度校正

    照度不均匀图片分辨率较差,许多信息被掩盖,为了较好地去除光照影响,真实再现原场景,本文提出了一种改进的Gamma非线性灰度矫正函数,实现了对不同像素进行不同程度的灰度修正,另
    发表于 03-01 14:31 26次下载

    OMNIVISION推出DSC等级的高质量成像产品

    OMNIVISION推出DSC等级的高质量成像产品 高级数字成像解决方案的领先开发商OmniVision Technologies, Inc.于近日宣布推出针对手机、基于1.75μ OmniBSI(背面照度)架构的最新成
    发表于 06-29 07:44 762次阅读

    为什么数码管亮度不均匀

    为什么数码管亮度不均匀?  关于亮度一致性的问题是一个行业内的常见问题。  有二个大的因素影响到亮度一致性。  一是使用原材料芯片的选
    发表于 11-06 11:44 6211次阅读

    RTC 计秒不均匀

    STM32F103RCT6的RTC 计秒不均匀
    发表于 12-07 18:13 0次下载

    简单分析光纤激光打标机打标效果不均匀的原因

    光纤激光打标机打标效果不均匀的原因分析。
    的头像 发表于 12-25 13:15 754次阅读

    机器人静电喷涂不均匀的原因有哪些

    因种种原因机器人静电喷涂有时候也有喷涂不均匀的情况,下面分享一机器人静电喷涂不均匀的原因。
    发表于 12-26 08:27 790次阅读

    浅谈连接器电镀不均匀的原因

    很多连接器都需要电镀,但是有些连接器电镀后会出现电镀不均匀的情况。我们来看看原因。
    的头像 发表于 12-07 14:18 1406次阅读

    DataParallel里为什么会显存不均匀以及如何解决

    DataParallel里为什么会显存不均匀以及如何解决
    的头像 发表于 12-14 10:36 1128次阅读