记忆空间电影剧情「梳理」

澎湃新闻资深记者 朱奕奕

序列记忆如何在大脑中存储？中国科学家记录猕猴大脑运作，提出新见解。

人类大脑无时无刻不在处理序列信息，不论是语言沟通、动作实施还是情景记忆，本质上都涉及对时序信息的表征。

而另一方面，序列的执行需要一定时间，大脑需要在应用时序信息之前记住整个序列。比如，我们要在问路时记住指路人给出的一系列方向，学新的舞蹈时记住一连串动作。在这些情况下，不仅单个内容需要被记住，它们之间的顺序也不能被混淆。

论文封面

2022年2月11日凌晨2点，《Science》期刊以长文形式发表了题为《序列工作记忆在猕猴前额叶表征的几何结构》的研究论文。该研究由中国科学院脑科学与智能技术卓越创新中心（神经科学研究所）、中国科学院灵长类神经生物学重点实验室王立平研究组，上海脑科学与类脑研究中心闵斌副研究员和北京大学生命科学学院唐世明课题组合作完成。

在该研究中，科学家训练猕猴记忆由多个空间位置组成的序列，记录猕猴大脑前额叶皮层的神经元活动。

研究人员发现，神经元以群体编码的形式表征了序列中的每一个空间位置，并在这些表征中发现了类似的环状几何结构。该研究推翻了经典序列工作记忆模型的关键假设，为理解神经网络如何进行符号表征这一难题提供了新的见解。

猴子脑中的“三块屏幕”

2月11日上午，王立平研究员介绍，人类一般有两种思考模式，分为直觉、情绪性的，和深思熟虑逻辑性的，而后者依靠的就是工作记忆。这一过程由两部分组成，分别是信息保持和信息操作。而他们研究组的科学问题正开始于此——序列记忆如何在大脑中存储的？

认知心理学家们早在19世纪初就开始思考序列信息的表征方式，序列信息编码也被认为是人类语言句法结构的前提，机器学习领域对序列翻译的探索更是催生了如今大显身手的Transformer模型。但是，对于具有时序信息记忆的大脑神经编码机制，人们仍知之甚少。

猕猴是演化上最接近人类的模式动物，为了探究时序记忆编码问题，研究人员训练猕猴记忆由多个位置点组成的空间序列。

猕猴空间序列记忆任务

在任务中，猕猴面前的屏幕上会依次闪现三个不同的点，猕猴需要在几秒钟之后将这些点按之前呈现的顺序汇报出来。在汇报前的几秒记忆保持期内，空间序列的信息便以工作记忆的形式被暂时储存在大脑中。

为了记录大脑神经元群体在猕猴进行任务时的活动状态，研究人员对工作记忆的大本营——外侧前额叶皮层进行了双光子钙信号成像。

大脑如何在记忆期内同时表征序列中多个信息呢？研究人员猜想猕猴的大脑中也有一块“屏幕”，猕猴可以把出现过的点记在这个屏幕上。可如果三个点同时在记忆保持期内显示在了这个屏幕上，每个点的次序又该如何体现呢？猕猴的大脑里面是否会同时存在三块不同的屏幕？这样每个屏幕只需要记下一个点的信息，而且屏幕之间不会互相干扰。

序列记忆在神经高维向量空间的表征

对此，研究人员分析了钙成像获得的高维数据，发现可以在高维向量空间里面找到每个次序的信息所对应的二维子空间，即找到其对应的“屏幕”。在每个子空间内，不同的点所对应的空间位置与真实视觉刺激的环状结构保持了一致。而且，不同次序所对应的子空间接近相互正交，说明大脑确实用到了三块不同的屏幕来表征序列信息。

为了进一步探究大脑是否总是用相同的这几块“屏幕”记忆不同类型的空间序列，研究人员对数据做了解码分析，即运用机器学习方法训练线性分类器来区分不同次序上的空间信息。比如，用猕猴正确应答时的神经元群体活动训练解码器，可以在部分做对的序列里面取得较好的解码效果。这些结果提示了用于编码次序的“屏幕”是稳定通用的。

研究人员还发现，不同次序的子空间之间共享了类似的环状结构，只是环的半径大小会随次序的增加而减小。一个可能的解释是，次序靠后的信息所分配到的注意资源更少，导致对应的环变小、区分度降低。这一结构也对应了序列记忆的行为表现，例如我们日常生活中如果记忆的内容越多，越往后的信息便更容易出错。

该发现也可总结为在群体水平的空间信息编码几何结构受时序调制的性质。有意思的是，这种性质并不完全适用于单个神经元水平，而单神经元活动的增强调制正是经典序列工作记忆模型的关键假设，提示了序列记忆的编码应更加关注群体神经元性质。

研究团队工作照

研究者：推翻经典序列工作记忆模型的关键假设

王立平用交响乐团的演奏来类比记忆中神经元的群体编码，每个演奏者都是一个神经元。研究组对次序子空间是如何在单个神经元上实现的进行挖掘，例如“是否有演奏者参与多首交响曲”，或者“演奏者是否以相同的方式参与”等。研究结果表明，有显著数量的演奏者以非常不同的方式参与不同交响曲，而这也推翻了经典序列工作记忆模型的关键假设，即以往认为的不同神经元总以同样的方式参与信息存储的工作。

该研究第一次在群体神经元水平阐释了序列工作记忆的计算和编码原理，也为神经网络如何进行符号表征这一难题提供了新的思路。

上世纪80年代，人工智能领域就有研究者提出张量乘积这一概念来实现神经网络对符号结构的表征，但其如何在神经网络层面自然涌现一直没有被很好的解决。序列工作记忆的神经表征正好对应了将该符号表征由对应次序的子空间嵌入到高维向量空间中，同时支持了下游神经网络对符号结构信息的线性读取。

中国科学院脑科学与智能技术卓越创新中心王立平研究组博士后谢洋和研究助理胡沛烑为论文共同第一作者，研究助理李俊汝、博士生陈静文和北京大学研究生宋卫彬在课题的不同阶段作出了贡献。法国国家健康与医学研究院Stanislas Dehaene教授、纽约大学汪小京教授和中科院脑智卓越中心杨天明研究员参与本研究。中科院、基金委、科技部和上海市政府资助了本工作。

据著名神经科学和生物物理学家郭爱克院士评价，这篇论文的创新性在于以猕猴的序列学习为对象，设计了时间和空间信息两个线索共存的实验范式，发现了高维神经元状态空间可以分解为多个二维子空间之和，从而揭示了序列信息的工作记忆在猕猴前额叶皮层表征的简单几何结构。这个发现揭示了序列信息编码利用了降维原则，从而降低了神经计算复杂性。此外，郭爱克院士指出，这篇论文将对受脑启发的人工智能研究发生影响。

责任编辑：徐晓阳 图片编辑：蒋立冬