摘要
本发明涉及一种用于阿尔茨海默症分类的多模态多任务融合注意力模型,属于注意力模型构建技术领域,包括依次连接的特征提取模块、临床引导注意力模块、代理注意力机制模块、动态门控特征融合模块和多任务损失函数模块;代理注意力机制模块还分别连接深度交叉网络模块和对比学习投影模块。本发明的模型通过临床引导注意力模块、动态门控特征融合模块、多任务对比解耦三阶段协同机制实现影像‑临床数据的高效融合。本发明的多模态多任务融合注意力模型基于ADNI数据库912例多中心数据训练验证:AD/CN二分类准确率100%,AD/MCI二分类准确95.16%,AD/CN/MCI三分类92.47%,达到先进水平。
技术关键词
融合注意力模型
多尺度特征提取
动态门控
多任务损失函数
阿尔茨海默症
采样模块
投影模块
网络模块
特征提取模块
封装模块
通道
注意力机制
分支
Sigmoid函数
跨模态