高效时空多模态图神经网络：科研人员提出新方案

信息来源：环球网

免费影视、动漫、音乐、游戏、小说资源长期稳定更新！ 👉 点此立即查看 👈

据环球网科技综合报道，1月11日消息，根据中国科学院正式发布的信息，中国科学院合肥物质科学院研究团队于近日提出了一种高效的时空多模态图神经网络（ET_MGNN）新型深度学习框架，显著提升了阿尔茨海默病和自闭症谱系障碍等脑部疾病的自动诊断准确率。

据悉，该项研究成果已发表在学术期刊《Neurocomputing》上。

要理解大脑的复杂活动，需要同时关注功能协同与结构解剖。然而，现有的脑网络学习模型在处理动态建模和多模态信息融合方面存在一定局限。为克服这些挑战，研究团队受大语言模型架构的启发，开发了ET_MGNN模型。

ET_MGNN模型通过时间滑动窗口技术，将反映脑区同步性的动态功能连接与提供物理约束的结构连接进行自适应融合，构建出更全面的动态大脑图序列；引入RWKV模块，融合循环神经网络捕获长程依赖的能力和Transformer并行计算的高效性，能够更精准地模拟大脑在不同功能状态间的动态切换；引入GASO图读取模块，能够识别出与疾病高度相关的关键脑区，为临床诊断提供直观的生物标志物。

该研究团队进一步在ABIDE II（自闭症）和ADNI（阿尔茨海默病）等数据集上进行了验证。实验结果显示：在自闭症分类任务中，相比于性能优异的现有模型，ET_MGNN模型的分类准确率平均提升了11.8%；在阿尔茨海默病与轻度认知障碍的鉴别中，ET_MGNN模型的准确率提升了32.9%。与同类模型相比，ET_MGNN模型的参数量降低了一个数量级，具备更低的峰值显存占用，更适合在资源受限的实际医疗环境中部署。ET_MGNN模型还能够识别相关疾病的病理关联区域。例如，在自闭症识别中，ET_MGNN模型聚焦于胼胝体运动网络；在阿尔茨海默病诊断中，ET_MGNN模型能够精准定位涉及记忆和注意力控制的默认网络及显著网络中的异常脑区。

研究介绍称，上述实验验证了ET_MGNN模型的有效性，为理解脑部疾病的神经机制提供了新的视角。（青云）