0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

MIT设计新型光子芯片 效率比电子芯片高1000万倍

gckX_aicapital 来源:yxw 2019-06-12 14:04 次阅读

MIT的研究人员开发出一种新型“光子”芯片,它使用光而不是电,并且在此过程中消耗相对较少的功率。该芯片用于处理大规模神经网络的效率比现有的计算机高出数百万倍。模拟结果表明,光子芯片运行光神经网络的效率是其电子芯片的1000万倍。

神经网络是一种机器学习模型,广泛用于机器人目标识别、自然语言处理、药物开发、医学成像和驱动无人驾驶汽车等任务。使用光学现象加速计算的新型光学神经网络可以比其他电子对应物更快、更有效地运行。

但随着传统神经网络和光学神经网络越来越复杂,它们消耗了大量的能量。为了解决这个问题,研究人员和包括谷歌、IBM和特斯拉在内的主要科技公司开发了“人工智能加速器”,这是一种专门的芯片,可以提高培训和测试神经网络的速度和效率。

对于电子芯片,包括大多数人工智能加速器,有一个理论上的最低能耗限制。最近,MIT的研究人员开始为光神经网络开发光子加速器。这些芯片执行数量级的效率更高,但它们依赖于一些体积庞大的光学元件,这些元件限制了它们在相对较小的神经网络中的使用。

在《物理评论X》上发表的一篇论文中,MIT的研究人员描述了一种新型光子加速器,它使用更紧凑的光学元件和光信号处理技术,以大幅降低功耗和芯片面积。这使得芯片可以扩展到神经网络,比对应的芯片大几个数量级。

比传统电子加速器的能耗极限低1000万倍以上

神经网络在MNIST图像分类数据集上的模拟训练表明,加速器理论上可以处理神经网络,比传统电子加速器的能耗极限低1000万倍以上,比光子加速器的能耗极限低1000倍左右。研究人员现在正在研制一种原型芯片来实验证明这一结果。

“人们正在寻找一种能够计算出超出基本能耗极限的技术,”电子研究实验室的博士后RyanHamerly说:“光子加速器是很有前途的……但我们的动机是建造一个(光子加速器)可以扩展到大型神经网络。”

这些技术的实际应用包括降低数据中心的能耗。“对于运行大型神经网络的数据中心的需求越来越大,而且随着需求的增长,它越来越难以计算,”合著者、电子研究实验室的研究生Alexander Sludds说,其目的是“利用神经网络硬件满足计算需求……以解决能源消耗和延迟的瓶颈”。

与Sludds和Hamerly合写该论文的有:RLE研究生、联合作者Liane Bernstein;麻省理工学院物理教授Marin Soljacic;一名麻省理工学院电气工程和计算机科学副教授Dirk Englund;一名RLE的研究员,以及量子光子学实验室的负责人。

依赖于一种更紧凑、节能的“光电”方案

神经网络通过许多包含互联节点(称为“神经元”)的计算层来处理数据,从而在数据中找到模式。神经元接收来自其上游“邻居”的输入,并计算一个输出信号,该信号被发送到下游更远的神经元。每个输入也被分配一个“权重”,一个基于其对所有其他输入的相对重要性的值。随着数据在各层中“深入”传播,网络逐渐学习更复杂的信息。最后,输出层根据整个层的计算生成预测。

所有人工智能加速器的目标都是减少在神经网络中的特定线性代数步骤(称为“矩阵乘法”)中处理和移动数据所需的能量。在那里,神经元和权重被编码成单独的行和列表,然后结合起来计算输出。

在传统的光子加速器中,脉冲激光编码了一个层中每个神经元的信息,然后流入波导并通过分束器。产生的光信号被送入一个称为“Mach-Zehnder 干涉仪”的正方形光学元件网格中,该网格被编程为执行矩阵乘法。干涉仪用每个重量的信息进行编码,使用处理光信号和重量值的信号干扰技术来计算每个神经元的输出。但是有一个缩放问题:对于每个神经元,必须有一个波导管,对于每个重量,必须有一个干涉仪。由于重量的数量与神经元的数量成正比,那些干涉仪占用了大量的空间。

“你很快就会意识到输入神经元的数量永远不会超过100个左右,因为你不能在芯片上安装那么多的元件,”Hamerly说,“如果你的光子加速器不能每层处理100个以上的神经元,那么很难将大型神经网络应用到这种结构中。”

研究人员的芯片依赖于一种更紧凑、节能的“光电”方案,该方案利用光信号对数据进行编码,但使用“平衡零差检测”进行矩阵乘法。这是一种在计算两个光信号的振幅(波高)的乘积后产生可测量电信号的技术。

光脉冲编码的信息输入和输出神经元的每个神经网络层——用来训练网络——通过一个单一的通道流动。用矩阵乘法表中整行权重信息编码的单独脉冲通过单独的通道流动。将神经元和重量数据传送到零差光电探测器网格的光信号。光电探测器利用信号的振幅来计算每个神经元的输出值。每个检测器将每个神经元的电输出信号输入一个调制器,该调制器将信号转换回光脉冲。光信号成为下一层的输入,以此类推。

这种设计只需要每个输入和输出神经元一个通道,并且只需要和神经元一样多的零差光电探测器,而不需要重量。因为神经元的数量总是远远少于重量,这就节省了大量的空间,所以芯片能够扩展到每层神经元数量超过一百万的神经网络。

找到最佳位置

有了光子加速器,信号中会有不可避免的噪声。注入芯片的光线越多,噪音越小,精确度也越高——但这会变得非常低效。输入光越少,效率越高,但会对神经网络的性能产生负面影响。但是有一个“最佳点”,Bernstein说,它在保持准确度的同时使用最小的光功率。

人工智能加速器的最佳位置是以执行一次两个数相乘的单一操作(如矩阵相乘)需要多少焦耳来衡量的。现在,传统的加速器是用皮焦(picojoules)或万亿焦耳(joule)来测量的。光子加速器以attojoules测量,效率高出一百万倍。

在模拟中,研究人员发现他们的光子加速器可以以低于attojoules的效率运行。 “在失去准确性之前,你可以发送一些最小的光功率。我们的芯片的基本限制比传统的加速器低得多......并且低于其他光子加速器,”Bernstein表示。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • MIT
    MIT
    +关注

    关注

    3

    文章

    253

    浏览量

    23392
  • 机器学习
    +关注

    关注

    66

    文章

    8418

    浏览量

    132628
  • 电子芯片
    +关注

    关注

    3

    文章

    57

    浏览量

    15021
  • 光子芯片
    +关注

    关注

    3

    文章

    99

    浏览量

    24419

原文标题:MIT设计新型光子芯片,效率比电子芯片高1000万倍

文章出处:【微信号:aicapital,微信公众号:全球人工智能】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    请问有什么芯片能够放大1mv 20MHz的小信号1000

    请问有什么芯片能够放大1mv 20MHz的小信号1000
    发表于 09-26 06:11

    OPA2333二级放大是否可以实现万倍放大?

    供电电源:直流3.3v 待放大输入电压:10uV。 请问二级放大是否可以实现万倍放大。如果可以,该怎样实现?
    发表于 08-13 06:58

    PHOTONIS 推出新型量子效率光电阴极

    新型 Hi-QE 光电阴极 S20 类型提高了 50% 的 QE。荷兰罗登 - PHOTONIS 荷兰公司宣布推出一款新型光电阴极,旨在提供极低暗计数、快速响应时间和量子
    的头像 发表于 07-17 06:35 226次阅读

    为何什么risc-v芯片arm的效率高

    RISC-V芯片在某些情况下可能相对于ARM架构芯片表现出更高的效率,这主要得益于RISC-V设计的一些特点和优势。 首先,RISC-V指令集架构是模块化的,这意味着设计师可以根据特定应用的需求
    发表于 04-28 09:38

    光子集成芯片光子集成技术的区别

    光子集成芯片光子集成技术虽然紧密相关,但它们在定义和应用上存在一些区别。
    的头像 发表于 03-25 14:45 804次阅读

    光子集成芯片光子集成技术是什么

    光子集成芯片光子集成技术是光子学领域的重要概念,它们代表了光子在集成电路领域的应用和发展。
    的头像 发表于 03-25 14:17 1035次阅读

    光电集成芯片光子集成芯片的区别

    光电集成芯片光子集成芯片在多个方面存在显著的区别。
    的头像 发表于 03-22 16:56 1528次阅读

    光子集成芯片的工作原理和应用

    光子集成芯片(Photonic Integrated Circuit,简称PIC)是一种将光子学和电子学功能集成在同一芯片上的技术。这种
    的头像 发表于 03-22 16:55 2063次阅读

    光子集成芯片是什么

    光子集成芯片,也称为光子芯片光子集成电路,是一种将光子器件小型化并集成在特殊衬底材料上的技术。
    的头像 发表于 03-22 16:51 1175次阅读

    微波光子集成芯片和硅基光子集成芯片的区别

    微波光子集成芯片和硅基光子集成芯片都是光电子领域的重要技术,但它们在设计原理、应用领域以及制造工艺上存在着显著的区别。
    的头像 发表于 03-20 16:14 1036次阅读

    简单认识微波光子集成芯片和硅基光子集成芯片

    微波光子集成芯片是一种新型的集成光电子器件,它将微波信号和光信号在同一芯片上进行处理和传输。这种芯片
    的头像 发表于 03-20 16:11 911次阅读

    光子集成芯片基础知识

    光子集成芯片,一种新型的光电子器件,将光子器件与集成电路技术相结合,实现了光信号与电信号的集成处理。它以其独特的工作原理和广泛的应用领域,成
    的头像 发表于 03-20 16:10 738次阅读

    光子集成芯片需要的材料有哪些

    光子集成芯片所需的材料多种多样,主要包括硅、氮化硅、磷化铟、砷化镓、铌酸锂等。这些材料各有其特性和应用领域,适用于不同的光子器件和集成芯片设计。
    的头像 发表于 03-18 15:27 1495次阅读

    新型光子芯片:以光子替换电子执行AI数学运算

    这种新式芯片首次巧妙地融合了纳米尺度物质操作先驱纳德·恩赫塔和硅光子(SiPh)平台理念。其中,恩赫塔通过光的运用提高数学计算速率,而硅光子平台则应用硅元素——广泛用于制造电脑芯片的经
    的头像 发表于 02-18 16:17 872次阅读