近年来,社会对利用人工智能技术进行信息处理的需求快速增长。目前,神经网络(注1)的信息处理在电子计算机上使用大量的CPU(中央处理单元)和GPU(图像处理单元)来执行,导致高功耗。另一方面,由于人类以低功耗处理信息,水库计算(注2)和量子计算技术,正在世界范围内取得进展。
东北大学材料科学研究所 (WPI-AIMR) 和国立先进工业科学技术研究院 AIST/东北大学数学先进材料建模开放创新实验室副主任 Natsuto Yoshinaga 副教授、该大学跨学科科学前沿研究所的助理教授 Kenji Iihama、WPI-AIMR 的 Narumi Mizukami 教授和该大学先进自旋电子学研究与开发中心,以及大学工学研究科研究生小池裕也(研究时)铁磁材料(注3)薄膜旋转波(注4)预计比传统的储层计算器能够以更低的功耗实现更高的学习性能物理储层计算(注5)的设备的机制。
以自旋波作为信息载体的人工智能硬件的研究正在全球范围内取得进展,其中重要的问题之一是实现纳米、千兆赫兹的高学习性能和高能效。该研究小组研究了在金属纳米薄膜等铁磁材料中传播的自旋波。通过激励磁性材料的输入节点位置产生与时间序列数据成比例的幅度的自旋波,并通过在输出节点位置读出传播的自旋波,可以实现具有短期记忆和非线性转换能力的学习。混沌时间序列(注6)的预测是可能的。此外,通过数学分析,我们阐明了自旋波速度与优化学习性能的元素尺寸之间的关系。这些结果为利用磁性纳米技术开发低功耗信息处理设备提供了新的视角。
这项研究于3月1日(英国时间)发表在自旋电子学领域的专业期刊上npj 自旋电子学
研究背景
近年来,社会对利用AI技术进行信息处理的需求快速增长。目前,使用神经网络的信息处理是在电子计算机上使用大量的CPU(中央处理单元)和GPU(图像处理单元)来执行的,导致高功耗。
另一方面,由于人类以低功耗处理信息,因此基于非传统概念(例如水库计算和量子计算技术)的科学技术信息处理的研究正在世界范围内取得进展。一个例子是使用磁性纳米技术进行物理储层计算(图 1)。物理油藏计算利用自旋波(磁振动和纳米级磁体发出的波)作为信息载体,并利用它们的叠加进行计算,在纳米级千兆赫频率下运行,有望以低功耗高效处理信息。先前的研究主要集中在使用磁性纳米技术和光学激光的物理储层研究。然而,为了在纳米尺度上实现高学习性能,研究按照新原理运行的物理储存器非常重要。
此举措
在这项研究中,我们重点关注在 4 纳米厚的铁磁薄膜中传播的自旋波。当微弱电流通过磁性材料时自旋注入扭矩(注7)产生这种现象与石头落到水面时波浪扩散的现象类似。波的振幅与流过它的电流的大小成正比,因此当用于信息处理的输入的时间序列作为电流传递时,该信息会以波的振幅传播到整个空间(图 1)。由于波的传播速度比光慢得多,因此可以通过测量不同位置的波振幅来检索过去的输入信息。
使用此属性,微磁模拟(注8)线性和非线性短期记忆容量(注9)是啊非线性自回归移动平均模型(注10)的预测等任务的学习性能。结果,我们发现与传统方法相比,可以用更少数量的物理节点实现高学习性能(图 2)。
我们还发现,可以使用描述磁性材料时滞响应的数学模型来理解这一结果。数学模型分析表明,当自旋波的传播速度与磁性材料的尺寸满足比例关系时,学习性能较高,而当不满足该条件时,学习性能会显着恶化(图3)。此外,我们发现利用自旋波进行物理油藏计算可以重现混沌时间序列的短期预测和全局轨迹,这些时间变化极其复杂且难以预测(图4)。
未来发展
在这项研究中,我们发现使用自旋波的铁磁薄膜物理储层计算机可以成为低功耗计算机的有用候选者。这项研究才刚刚开始,我们将继续研究旨在将其应用于人工智能硬件的研究,例如实际设备的开发和集成材料的特性。我们还将为数学研究的发展做出贡献,以了解在什么条件下物理油藏计算可以实现高学习性能。

图 1 物理储层计算示意图,这是一种在磁性薄膜中使用自旋波的人工智能硬件应用。一种能够处理时间序列信息的设备,通过将输入时间序列转换为输出时间序列,可以预测输入时间序列的未来数据并存储和读取过去的数据。输入时间序列激发物理水库中物理节点的动态(上图黄点,下图蓝色圆柱),通过读出时间变化得到输出时间序列。在自旋波储层计算中,通过将与输入时间序列成比例的电流流到物理节点来激发自旋波。学习是利用该自旋波的传播来进行的。通过利用自旋波,我们可以实现高性能的纳米级储层计算机。

图 2 在磁性薄膜和短期记忆任务学习中使用自旋波的非线性自回归移动平均模型的性能评估。在学习过程中,通过调整读出自旋波时每个物理节点的权重,可以获得接近正确答案(蓝线,左上图)的输出(红线,左上图)。当使用学习到的权重(红线,右上图)进行预测时,可以以非常小的误差重现正确答案(蓝线,右上图)。与传统磁技术相比,可以用更少的物理节点实现同等的学习性能。

图3。我们从数学上阐明了为了实现最佳学习性能,物理存储库的大小和信息传播速度之间必须有一个条件。在这项研究中,物理储层使用自旋波,因此设备的尺寸可以根据其传播速度减小到亚微米级别。另一方面,在使用光学元件的系统中,信息以光速传播,从而产生巨大的物理存储库。

图 4 使用自旋波进行物理储层计算来预测混沌时间序列。左图显示了使用洛伦兹模型得到的混沌时间序列的轨迹。使用这个时间序列,我们进行了一项学习任务,询问是否有可能在给定特定时间的数据的情况下预测下一次的数据(见右图)。尽管由于初始值敏感性,混沌时间序列只能预测很短的时间(短期预测),但轨迹本身可以重现,这表明使用自旋波的物理储层能够学习模型的结构。
这项研究得到了 JST PRESTO (JPMJPR22B2)、新兴研究支持项目 (JPMJFR2140)、文部科学省下一代 X-NICS 半导体创建中心组建项目 (JPJ011438) 和日本学术振兴会 (JSPS) 科学研究援助基金 (A) 的支持(JP21H04648)。此外,本研究的一部分是利用AIST的AI Bridging Cloud(ABCI)和北海道大学信息技术中心的超级计算机提供的计算资源进行的。
标题:波速和尺寸之间的通用缩放使得基于传播自旋波的纳米级高性能储层计算成为可能
作者:S Iihama、Y Koike、S Mizukami 和 N Yoshinaga
*通讯作者:吉永夏人,东北大学先进材料科学研究所副教授
已出版的杂志:npj 自旋电子学
DOI:101038/s44306-024-00008-5