MindLLM 是耶鲁大学、达特茅斯学院和剑桥大学联合推出的AI模型,能将脑部功能性磁共振成像(fMRI)信号解码为自然语言文本。MindLLM基于一个主体无关(subject-agnostic)的 fMRI 编码器和一个大型语言模型(LLM)实现高性能解码,引入脑指令调优(Brain Instruction Tuning,BIT)技术,捕捉 fMRI 信号中的多样化语义信息。MindLLM 在多个基准测试中表现优异,下游任务性能提升12.0%,跨个体泛化能力提升16.4%,新任务适应性提升25.0%。MindLLM为脑机接口和神经科学研究提供新的可能性。

MindLLM – 耶鲁联合剑桥等机构推出的医疗领域 AI 模型  第1张
(图片来源网络,侵删)
MindLLM – 耶鲁联合剑桥等机构推出的医疗领域 AI 模型  第2张
(图片来源网络,侵删)