0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

用SPAD512S在3D成像中的应用

上海昊量光电设备有限公司 2023-03-17 09:54 次阅读

在从空间成像到生物医学显微镜、安全、工业检查和文化遗产等众多领域,对快速、高分辨率和低噪声3D成像的要求非常高。在这种情况下,传统的全光成像代表了3D成像领域最有前景的技术之一,因为其超高的时间分辨率:3D成像是在30M像素分辨率下每秒7帧的单次拍摄中实现的,对于1M像素分辨率为每秒180帧;无多个传感器,近场需要耗时的扫描或干涉技术。然而常规全光成像导致分辨率损失,这通常是不可接受的。

我们打破这种限制的策略包括将一个全新的和基础性的采用上一代硬件和软件解决方案。基本思想是通过使用新型传感器来利用存储在光的相关性中的信息实现一项非常雄心勃勃的任务的测量协议:高速(10–100 fps)量子全光成像(QPI)具有超低噪声和前所未有的性能分辨率和景深的组合。所开发的成像技术旨在:在成为第一个实际可用和适当的“量子”成像技术超出了经典成像模式的固有限制。

除了基础感兴趣的是,该技术的量子特性允许在3D上提取信息来自极低光子通量下的光相关性的图像,从而减少场景暴露于光照。对QPI的兴趣是由潜在的相对于其他已建立的3D成像技术的优点。实际上,其他与QPI不同,方法需要精细的干涉测量,如数字测量全息显微镜或相位恢复算法,如傅里叶全息图或快速脉冲照明,如飞行时间(TOF)成像。此外,QPI提供了无扫描显微镜模式的基础,克服了共聚焦方法。

量子全光相机有望提供全光成像的优势,主要是超快和免扫描的 3D 成像和重聚焦能 力,其性能是经典相机无法企及的。最先进的全光成像设备能够在单次拍摄中获取多视角图像.它们的工作原理是基于对给定场景中光的空间分布和传播方向的同时测量。获取的方向信息转化为快速 3D 成像所需的重聚焦能力、可增加的景深(DOF)和多视角 2D 图像的并行获取。

在最先进的全光照相机中,方向检测是通过在标准数码相机的主镜头和传感器之间插 入微透镜阵列来实现的。传感器获取复合信息,该复合信息允许识别检测到的光来自 的物点和透镜点。然而,由于结构(使用微透镜阵列)和基本(高斯极限)原因,图像分辨率与获 得的方向信息成反比地降低;因此,在基于简单强度测量的设备中,在衍射极限下的全光成像 被认为是无法实现的。

4c9a081e-c345-11ed-ad0d-dac502259ad0.png4cb1d64c-c345-11ed-ad0d-dac502259ad0.png

图(a)传统全光成像(PI)设备的方案:物体的图像聚焦在微透镜阵列上,而每个微透镜将主透镜 的图像聚焦在后面的像素上。这种配置需要与方向分辨率的增益成比例的空间分辨率的损失;(b)显示了相关全光成像(CPI)设置的方案,其中方向信息是通过将物体聚焦的传感器检索到的信号与收集 光源图像的传感器相关联而获得的。

为了实现全光成像,我们正在寻求一个超高性能的探测器,一个相关部分是通过用基于尖端技术的传感器(如单光子雪崩 二极管(SPAD)阵列)取代商用高分辨率传感器(如科学 CMOS 和 EMCCD 相机)来确定的。SPAD 基本上是一个光电二极管,其反向偏置电压高于其击穿电压,因此撞击其光敏区域的单个 光子可以产生电子-空穴对,从而触发次级载流子的雪崩,并在非常短的时间尺度(皮秒) 内产生大电流。这种操作方式被称为盖革模式。

SPAD输出电压由电子电路感测并直接转换成数字信号,进一步处理以存储光子到达和/或光子到达时间的二进制信息。从本质上来说,SPAD 可以被看作是一个具有精密时间精度的光子-数字转换装置。SPADs 也可以选通,以便只在短至几纳秒的时间窗口内敏感。如今,单个 SPAD 可以用作大型阵列的构建模块,每个像素电路都包含 SPAD 和即时光子处理逻辑和互连。

有几种 CMOS 工艺可供选择,可以定制关键 SPAD 性能指标和整体传感器或成像器架构.灵敏度和填充因子有一段时间落后于科学 CMOS 或 EMCCD,但近年来已大幅赶上。

根据 QPI 的要求,我们选择使用由 EPFL AQUA laboratory group 开发的 SwisSPAD2 阵列,其特点是 512×512 像素分辨率,这是迄今为止最广泛、最先进的 SPAD 阵列之一。传感器内部由 256×512 像素的两半组成,以减少信号线上的负载和偏斜,实现更快的操作。这是一个纯粹的二进制门控成像器,即每个像素为每帧记录 0(无光子)或 1(一个或多个光子),读出噪声基本为零。传感器由 FPGA 控制,FPGA 产生门控电路和读出 序列的控制信号,并收集像素检测结果。在 FPGA 中,在发送到计算机/GPU 进行分析和存储之前,可以进一步处理得到的一位图像,例如,累积成多位图像。对于准直光,通过微透镜阵列,最大帧速率为 97.7 kfps,10.5%的自然填充因子可以提高 4-5 倍 (优化后的 模拟预计会有更高的值);在 520 纳米(700 纳米)和 6.5 伏过量偏压下,光子探测概率为 50% (25%)。该器件还具有低噪声(室温下每像素平均暗计数率通常低于 100 cps,中值约低 10 倍)和先进的纳秒门控电路。

4cd60846-c345-11ed-ad0d-dac502259ad0.png

SwissSPAD2 门窗口轮廓。图中标注了转换时间和栅极宽度。栅极宽度可由用户编程,内部激光触发模式下的最小栅极宽度为 10.8 ns。

4d00b4ec-c345-11ed-ad0d-dac502259ad0.png

SwissSPAD2 显微照片(左)和像素示意图(右)。像素由 11 个 NMOS 晶体管组成,7 个具有厚氧化 物,4 个具有薄氧化物栅极。像素在其存储电容器中存储二进制光子计数。像素内门定义了相对于 20 MHz 外部触发信号的时间窗口,其中像素对光子敏感。

全光相机是一种全新的 3D 成像设备,利用动量-位置纠缠和光子数相关性来提供全光设备典型的重新聚焦和超快速、免扫描的 3D 成像能力,以及标准全光相机无法实现的显著增强的性能:衍射极限分辨率、大焦深和超低噪声;然而,为了使所提出的器件的量子优势有效并吸引最终用户,需要解决两个主要挑战。

首先,由于相关测量需要大量的帧 来提供可接受的信噪比,如果用商业上可获得的高分辨率相机来实现,量子全光成像(QPI)将需要几十秒到几分钟的采集时间。第二,为了检索 3D 图像或重新聚焦 2D 图像,对这大量数据的加工需要高性能和耗时的计算。为了应对这些挑战,我们正在开发高分辨率单光子雪崩光电二极管(SPAD)阵列和超快速电子设备的高性能低级编程,结合压缩传感和量子层析成像算法,旨在将采集和加工时间减少两个数量级。还将讨论开发 QPI 设备的途径。

如下为昊量光电SPAD512S相机参数,看后你将对全光成像有新的了解及认识。

4d327342-c345-11ed-ad0d-dac502259ad0.png

4d57ed98-c345-11ed-ad0d-dac502259ad0.png

4d68a4bc-c345-11ed-ad0d-dac502259ad0.png

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2548

    文章

    50646

    浏览量

    751780
  • 3D成像
    +关注

    关注

    0

    文章

    98

    浏览量

    16041
收藏 人收藏

    评论

    相关推荐

    UV光固化技术3D打印的应用

    UV光固化3D打印技术凭借高精度、快速打印环保优势,工业设计等领域广泛应用。SLA、DLP及CLIP技术各具特色,推动3D打印向高速、高精度发展。
    的头像 发表于 11-15 09:35 179次阅读
    UV光固化技术<b class='flag-5'>在</b><b class='flag-5'>3D</b>打印<b class='flag-5'>中</b>的应用

    傅里叶光场显微成像技术—2D显微镜实现3D成像

    近年来,光场显微技术的应用越来越广泛,针对光场显微镜的改进和优化也不断出现。目前市场各大品牌的2D显微镜比比皆是,如何在其基础上实现三维成像一直是成像领域的热门话题,本次主要讨论3D
    的头像 发表于 10-31 08:05 261次阅读
    傅里叶光场显微<b class='flag-5'>成像</b>技术—2<b class='flag-5'>D</b>显微镜实现<b class='flag-5'>3D</b><b class='flag-5'>成像</b>

    3D霍尔效应传感器机器人设计的机械优势

    电子发烧友网站提供《3D霍尔效应传感器机器人设计的机械优势.pdf》资料免费下载
    发表于 09-03 11:36 0次下载
    <b class='flag-5'>3D</b>霍尔效应传感器<b class='flag-5'>在</b>机器人设计<b class='flag-5'>中</b>的机械优势

    裸眼3D笔记本电脑——先进的光场裸眼3D技术

    随着科技的不断进步,裸眼3D技术已经不再是科幻电影的幻想。如今,英伦科技裸眼3D笔记本电脑将这一前沿科技带到了我们的日常生活。无论你是专业的3D
    的头像 发表于 07-16 10:04 456次阅读

    奥比3D相机打造高质量、低成本的3D动作捕捉与3D动画内容生成方案

      在过去几十年里,动作捕捉(MoCap)技术经历了显著的发展,广泛被应用于电影、游戏、虚拟现实、医疗等多个领域。近期,奥比光合作客户Moverse使用Orbbec Femto系列3D相机,打造出
    的头像 发表于 06-25 16:37 1018次阅读

    工业镜头3D结构光检测实际应用

    工业镜头3D结构光检测实际应用
    的头像 发表于 06-01 08:34 274次阅读
    工业镜头<b class='flag-5'>在</b><b class='flag-5'>3D</b>结构光检测<b class='flag-5'>中</b>实际应用

    ad193d模型不显示?

    封装库导入3d模型不显示,但导入3d模型后的封装库生成pcb文件时显示3d模型,这是什么原因导致的。
    发表于 04-24 13:41

    晶振3D打印技术的应用都有哪些?

    3D打印过程,需要进行大量的数据处理,包括模型的切片、打印路径的规划等。
    的头像 发表于 03-17 11:29 563次阅读

    高分工作!Uni3D3D基础大模型,刷新多个SOTA!

    我们主要探索了3D视觉scale up模型参数量和统一模型架构的可能性。NLP / 2D vision领域,scale up大模型(GPT-4,SAM,EVA等)已经取得了很imp
    的头像 发表于 01-30 15:56 782次阅读
    高分工作!Uni<b class='flag-5'>3D</b>:<b class='flag-5'>3D</b>基础大模型,刷新多个SOTA!

    高精度彩色3D相机:开启崭新的彩色3D成像时代

    近年来,机器人技术的快速发展促使对3D相机技术的需求不断增加,原因在于,相机提高机器人的性能和实现多种功能方面发挥了决定性作用。
    的头像 发表于 01-15 14:09 499次阅读
    高精度彩色<b class='flag-5'>3D</b>相机:开启崭新的彩色<b class='flag-5'>3D</b><b class='flag-5'>成像</b>时代

    友思特分享 | 高精度彩色3D相机:开启崭新的彩色3D成像时代

    3D成像的新时代 近年来,机器人技术的快速发展促使对3D相机技术的需求不断增加,原因在于,相机提高机器人的性能和实现多种功能方面发挥了决定性作用。然而,其中许多应用所需的解决方案更复
    的头像 发表于 01-11 09:57 393次阅读
    友思特分享 | 高精度彩色<b class='flag-5'>3D</b>相机:开启崭新的彩色<b class='flag-5'>3D</b><b class='flag-5'>成像</b>时代

    ad3d封装放到哪个层

    广告3D封装通常放置视觉设计层。视觉设计是广告至关重要的一个层面,通过图像、颜色和排版等视觉元素来引起目标受众的注意,并传达广告的
    的头像 发表于 01-04 15:05 972次阅读

    提供3D打印材料与解决方案,助力3D打印产业发展

    提供3D打印材料与解决方案,助力3D打印产业发展
    的头像 发表于 12-12 11:12 516次阅读

    3D 封装与 3D 集成有何区别?

    3D 封装与 3D 集成有何区别?
    的头像 发表于 12-05 15:19 982次阅读
    <b class='flag-5'>3D</b> 封装与 <b class='flag-5'>3D</b> 集成有何区别?

    深度解析3D视觉成像几种典型方案

    类似于ToF相机、光场相机这类相机,可以归类为单相机3D成像范围,它们体积小,实时性好,适合Eye-in-Hand系统执行3D测量、定位和实时引导。
    发表于 12-05 12:24 915次阅读
    深度解析<b class='flag-5'>3D</b>视觉<b class='flag-5'>成像</b>几种典型方案