0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

面向超快机器视觉的空时域光计算

led13535084363 来源:光行天下 2023-06-12 10:07 次阅读

随着人工神经网络应用的持续深化,机器视觉算法复杂度剧增,亟需高算力支持。然而,受制于摩尔定律放缓,现有电子计算性能趋于饱和,难以满足大规模智能算法对算力和能效日益增长的需求。用光子替代电子作为智能计算载体有望对当前视觉计算带来革命性的突破。然而,现有智能光计算架构往往依赖电子处理器作为计算中继,严重削弱了光计算高速高并行的计算优势,难以赋能超快机器视觉应用。

ba7085cc-0871-11ee-962d-dac502259ad0.png

图1.空时域光计算模型

近日,清华大学电子系方璐副教授课题组建立了空时域超快智能光计算架构,提出了跨维度空时域匹配方法和联合空时域矩阵向量光计算模型,首次实现了三维空时域智能光计算系统,突破了数字内存读写的掣肘,将动态机器视觉处理速度提升三个数量级(达到纳秒量级)。

课题组通过刻画多维光场传播模型,首次建立空时域计算表征,同时在空间和时序维度完成连续光计算。针对空间光场和时序光场内在维度失配问题,提出空间复用和光谱复用计算模型,匹配空时域光计算维度。进一步建立时序矩阵乘加计算模型,扩展空时域光计算维度。所有空间和时序计算操作均在光学模拟域完成,因此空时域光计算的速度不受制于电子内存的传输和读写。该论文进一步提出了多变量全光非线性函数,成功构建多层非线性神经网络,支撑复杂视觉智能任务的高速推理。在多个视频数据集上的实验结果表明,空时域光计算能够将视频智能处理速度提升至数百兆赫兹量级,有望为后摩尔时代高性能智能计算以及瞬态科学现象的实时分析和控制等带来新的契机。

ba917db8-0871-11ee-962d-dac502259ad0.png

图2.高速目标追踪

baabc222-0871-11ee-962d-dac502259ad0.png


图3. 纳秒超快计算 研究工作以“面向超快机器视觉的空时域光计算”(Ultrafast dynamic machine vision with spatiotemporal photonic computing)为题发表在国际期刊《科学·进展》(Science Advances)上,并入选期刊首页专题文章(feature article)。

责任编辑:彭菁

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器视觉
    +关注

    关注

    162

    文章

    4369

    浏览量

    120297
  • 计算
    +关注

    关注

    2

    文章

    450

    浏览量

    38795

原文标题:清华大学:面向超快机器视觉的空时域光计算

文章出处:【微信号:光行天下,微信公众号:光行天下】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    机器视觉计算视觉的关系简述

    初涉机器视觉领域,总是容易将其与计算视觉这一概念混淆。实际上两者确实存在一定的相同之处,但也不能因此而将这两者视为同一概念,因为这两者还存在着显著的差别。而与此同时,两者也还有着密不
    发表于 05-13 14:57

    机器视觉计算方法

    机器视觉计算方法
    发表于 08-14 09:23

    单光子水平的开关原理性实验得以实现

    单光子水平的开关原理性实验得以实现 实现弱光光学门-
    发表于 11-26 08:20 821次阅读

    面向机器视觉系统的CCD数字相机设计

    面向机器视觉系统的CCD数字相机设计,下来看看
    发表于 09-18 14:57 32次下载

    机器视觉的定义!机器视觉的优势究竟有哪些?

    机器视觉技术,是一门涉及人工智能、神经生物学、心理物理学、计算机科学、图像处理、模式识别等诸多领域的交叉学科。机器视觉主要用
    的头像 发表于 05-08 13:43 5619次阅读

    机器视觉计算视觉的区别的讲解

    机器视觉计算视觉的区别的讲解。
    发表于 04-27 10:34 7次下载

    详谈机器视觉计算视觉的异同

    详谈机器视觉计算视觉的异同
    发表于 05-28 09:55 8次下载

    机器视觉计算视觉的区别

    计算视觉是一个研究领域,专注于使机器能够解释和分析来自周围世界的视觉数据。简单地说,它是机器像人类一样看到和理解图像和视频的能力。
    发表于 02-22 09:34 1020次阅读

    面向机器视觉时域计算

    用光子替代电子作为智能计算载体有望对当前视觉计算带来革命性的突破。
    发表于 06-15 15:28 185次阅读
    <b class='flag-5'>面向</b><b class='flag-5'>超</b><b class='flag-5'>快</b><b class='flag-5'>机器</b><b class='flag-5'>视觉</b>的<b class='flag-5'>空</b><b class='flag-5'>时域</b><b class='flag-5'>光</b><b class='flag-5'>计算</b>

    什么是机器视觉计算机?

    机器视觉是用于通过分析视频和图像帮助计算机做出决策的硬件和软件的集成。在制造业中,机器视觉通常用于生产线上,以便在产品的每个阶段进行自动检查
    的头像 发表于 12-26 17:51 989次阅读
    什么是<b class='flag-5'>机器</b><b class='flag-5'>视觉</b><b class='flag-5'>计算</b>机?

    什么是机器视觉机器视觉计算机有什么关系?

    机器视觉计算视觉有什么区别
    的头像 发表于 06-05 09:28 1293次阅读
    什么是<b class='flag-5'>机器</b><b class='flag-5'>视觉</b>?<b class='flag-5'>机器</b><b class='flag-5'>视觉</b>与<b class='flag-5'>计算</b>机有什么关系?

    机器视觉运动控制组态软件RTFuse在XYZ三轴运动平台的应用方案

    RTFuse是针对正运动技术的VPLC系列机器视觉与运动控制一体机开发的一款组态软件,可快速搭建机器视觉运动控制应用系统,主要
    的头像 发表于 07-29 09:20 839次阅读
    <b class='flag-5'>机器</b><b class='flag-5'>视觉</b>运动控制<b class='flag-5'>快</b>组态软件RTFuse在XYZ三轴运动平台的应用方案

    机器视觉计算视觉的区别

    机器视觉计算视觉的区别 机器视觉计算
    的头像 发表于 08-09 16:51 2019次阅读

    面向Xilinx FPGA和SoC的设计方法指南

    电子发烧友网站提供《面向Xilinx FPGA和SoC的设计方法指南.pdf》资料免费下载
    发表于 09-14 10:02 1次下载
    <b class='flag-5'>面向</b>Xilinx FPGA和SoC的<b class='flag-5'>超</b><b class='flag-5'>快</b>设计方法指南

    机器视觉计算视觉有什么区别

    机器视觉计算视觉是两个密切相关但又有所区别的概念。 一、定义 机器视觉
    的头像 发表于 07-16 10:23 524次阅读