一种基于变分自编码模型的多模态脑影像信息融合方法

本发明公开了一种基于变分自编码模型的多模态脑影像信息融合方法，属于生物医学图像模式识别技术领域。本发明提出的脑结构和脑功能融合方法可以适用于来自不同尺度的信息，并且采用无监督的方式进行训练，不需要额外的手动标注，适用于临床场景。结果显示，这种混合专家变分自编码模型可以准确地还原个体脑影像信息，且可在模态缺失场景下进行跨模态生成，有助于节约临床成本。此外，由编码器编码的低维融合向量被证实可以用于预测个体年龄，为个体信息解码提供新思路。