分享自:

多会话、多任务神经解码:来自不同细胞类型和脑区的研究

期刊:ICLR 2025

这篇文档属于类型a,是一篇关于多区域多任务神经解码的原创研究论文。以下是详细的学术报告内容:


主要作者及机构

本研究由来自Georgia Tech和Mila的研究团队合作完成,主要作者包括Mehdi Azabou、Krystal Xuejing Pan、Vinam Arora、Ian Knight、Eva L. Dyer和Blake Richards。论文以“Multi-Session, Multi-Task Neural Decoding from Distinct Cell-Types and Brain Regions”为题,发表于ICLR 2025会议。

学术背景

研究领域:本研究属于计算神经科学领域,聚焦于神经解码(neural decoding)技术,旨在通过分析神经活动推断行为、感知或思维。近年来,随着Transformer架构的兴起,大规模神经解码模型展现出潜力,但跨脑区、跨细胞类型的解码仍面临挑战。
研究动机:神经环路具有高度异质性,不同脑区和细胞类型对相同刺激的响应差异显著。此前研究多局限于单一脑区或细胞类型,而本研究试图探索是否可以通过预训练和迁移学习实现跨区域、跨细胞类型的神经解码。
研究目标:开发一种多任务Transformer架构(Poyo+),利用Allen Institute的Brain Observatory数据集(包含小鼠视觉皮层6个脑区、13种基因定义的细胞类型的11万个神经元数据),验证跨任务、跨脑区和跨细胞类型的迁移学习可行性。


研究流程与方法

1. 数据与模型设计

数据集
- 使用Allen Brain Observatory数据集,包含256只小鼠的1335个记录会话,覆盖6个视觉皮层区域(VISp、VISpm、VISam、VISrl、VISal、VISl)和13种细胞类型(兴奋性和抑制性神经元)。
- 数据通过双光子钙成像(two-photon calcium imaging)采集,记录小鼠对不同视觉刺激(如漂移光栅、自然场景、电影片段)的神经响应。

模型架构(Poyo+)
- 输入表征(Tokenization):将钙信号时间序列转换为神经元-时间步长的联合表征,每个token包含神经元特异性嵌入(uj)和信号幅度(wf fij)。
- 编码器(Encoder):基于改进的Poyo架构,通过交叉注意力层将神经元活动压缩为低维潜在空间,生成128维的潜在表征(zmn)。
- 多任务解码器(Multi-Task Decoder):通过任务特定嵌入(ϕk)和会话嵌入(sℓ)动态查询潜在空间,支持连续(如奔跑速度)和离散(如刺激分类)解码任务。

2. 实验设计

训练策略
- 采用多任务联合训练,损失函数包括均方误差(回归任务)和交叉熵(分类任务)。
- 使用LAMB优化器,在8块NVIDIA H100 GPU上训练300个epoch,全局批次大小为4800。

迁移学习验证
- 跨脑区迁移:在30只未参与训练的小鼠中,测试模型从VISp到其他脑区的迁移性能。
- 跨细胞类型迁移:分别训练兴奋性(exc)、抑制性(inh)和混合(all)细胞类型的模型,评估解码能力。
- 跨数据集验证:在OpenScope和 hippocampus数据集上测试模型泛化性。

3. 潜在表征分析

  • 通过t-SNE降维和层次聚类,分析潜在空间是否自发区分脑区和细胞类型。
  • 训练线性分类器,量化潜在表征对脑区和细胞类型的解码准确率。

主要结果

1. 多任务训练的优势

  • 相比单任务模型(如仅训练漂移光栅解码的Poyo-DG),多任务Poyo+在12项任务中表现更优,尤其在行为解码(如奔跑速度)上提升显著(图3c)。
  • 多任务学习通过整合密集预测任务(如瞳孔位置),增强了模型对神经群体动态的捕捉能力。

2. 跨区域与跨细胞类型迁移

  • 跨脑区迁移:模型在VISal和VISl训练后,迁移至其他区域时表现最佳(表1)。例如,VISal训练的模型在VISam和VISp的解码准确率分别达52.19%和52.14%。
  • 跨细胞类型迁移:抑制性细胞模型(Poyo-INH)在抑制性数据上表现最优(31.96%准确率),且对兴奋性数据也有较好迁移性(62.89%)。

3. 潜在表征的生物意义

  • 脑区区分:潜在空间自发形成与解剖结构一致的聚类,如内侧(VISam/VISpm)和外侧(VISrl/VISl)区域分离(图4c)。
  • 细胞类型区分:抑制性神经元(如PV、SST)在潜在空间中紧密聚集,且聚类反映其生理特性(如轴突投射模式)(图4g)。

4. 跨数据集泛化

  • 在OpenScope数据集(靶向树突记录的实验)上,Poyo+比MLP基线提升9%准确率(表3)。
  • 在海马体位置解码任务中,预训练模型比从头训练模型误差降低7.3%(表4)。

结论与价值

科学意义
1. 首次证明跨脑区、跨细胞类型的大规模神经解码可行性,揭示了神经环路间共享的计算原则。
2. 潜在表征自发编码解剖和生理信息,为研究神经环路异质性提供了无监督分析工具。

应用价值
1. 为脑机接口(BCI)和深部脑刺激(DBS)提供了通用解码框架。
2. 通过算法整合多实验数据,助力神经科学中的跨研究比较。


研究亮点

  1. 方法创新:提出首个多任务、多模态的神经解码Transformer架构(Poyo+),支持灵活的任务查询。
  2. 数据规模:训练集涵盖1335个会话,是此前研究的数量级提升。
  3. 生物学发现:潜在空间自发反映神经元的解剖与功能特性,无需显式监督。

其他有价值内容

  • 开源与可复现性:代码和项目页公开于https://poyo-plus.github.io
  • 跨物种潜力:作者指出未来可扩展至其他脑区和物种,进一步验证通用性。

(全文约2000字,完整覆盖研究背景、方法、结果与价值)

上述解读依据用户上传的学术文献,如有不准确或可能侵权之处请联系本站站长:admin@fmread.com