超高效人工光电神经元成真?速度比自然神经元快3万倍,研究登Nature子刊
AI 系统越来越受限于为实现其功能的硬件。现在,一种新的超导光子电路问世,它可模拟脑细胞之间的连接。这仅需消耗人类具有同类功能细胞能量的 0.3% ,而运行速度却可提高约 30000 倍。在人工神经网络中,被称之为神经元的诸多组件被植入数据并协同来解决诸如人脸识别等问题。神经网络反复调整相互间的突触——一种神经元之间的连接,确定由此产生的行为模式是否为更佳的解决方案。但随着时间推移,神经网络最终会在计算的结果中发现最佳的行为模式。而后它会选取这些模式作为默认值,模仿人脑的学习过程。
尽管 AI 系统被逐步发掘更多真实世界中的应用,但鉴于用于驱动其运行的硬件局限性,它们仍面临诸多重大挑战。为了解决这个问题,研究人员已经开发出了受人脑启发的神经形态计算机硬件。
例如,神经形态的微芯片组件可能仅会在一定时间内接受到特定数量的输入信号时,才可能发出尖峰信号或者生成一种输出信号。这是一种更接近模拟真实生物神经元行为方式的策略。与典型的人工神经网络相比,这些设备仅发出极少的尖峰信号,因此所处理的数据将会少得多,同时原则上所需功率和通信带宽会小很多。
然而,神经形态硬件通常使用传统电子设备,这最终会限制它们可实现的复杂功能和信号传递速度。举例来说,每个生物神经元都可以拥有数万个突触,但神经形态设备很难将它们的人工神经元相互连接起来。对此,一种有效的解决方案就是多路复用,即一个信号通道可以同时承载更多的信号。然而,随着芯片变得更大、更复杂精细,运算速度可能会迟缓。
研究概览
如下渲染图展示了模拟神经元突触(大脑中神经元之间的接口点)的超导电路如何被用来创造未来的人造光电神经元。
NIST 的研究员、通讯作者 Jeffrey Shainline 表示,「多年来,我们一直在努力进行理论研究工作,希望发掘出使技术能够实现神经形态计算的物理极限的本质原理。对这一目标的追求让我们想到了这个概念——将单光子能级的光通信与约瑟夫森结执行的神经网络计算相结合。」
在感应到一个光子后,单光子探测器(single-photon detector, SPD)就会产生磁通量子,而后这些通量子就会在 SQUID 的超导回路中作为电流被收集。这种存储的电流可以作为一种记忆形式,记录神经元发出了多少次尖峰信号。
下图 2 为布局和完成的电路。a 为整个突触电路的 3D 布局;b 为完成制造的显微镜图像;c 为 SPD 布局;d 为制造中的 SPD;e 为 JJ 和分流电阻的布局;f 为制造中的 JJ 和分流器;g 为用于 DR(dendritic receiving, 树突接收)循环的 SQUID;h 为制造中的 DR SQUID。
下图 3 展示了单个突触的特性,其时间常数为 6.25 μs,电感为 2.5 μH。测量结果表明实际值分别为 8.06 μs 和 3.2 μH。
未来,研究者将把他们研发的新突触与片上光源相结合,创造出完全集成的超导神经元。Shainline 对此表示,「实现完全集成的超导神经元仍然存在巨大的挑战,但若我们能够将最后那部分也集成进去,那么非常有理由相信最终它可能会成为人工智能的强大计算平台。」
原文链接:https://spectrum.ieee.org/neuromorphic-computing-superconducting-synapse
2022 NeurIPS Meetup China 将设置 Keynote、圆桌论坛、论文分享、 Poster 展示、企业招聘等环节,邀请顶级专家、论文作者与现场参会观众共同交流。
- 举办时间:2022年11月26日9:00-18:00
-
举办地点:北京丽都皇冠假日酒店