多模态的医学影像分析方法及其计算机程序产品

本申请公开了一种多模态的医学影像分析方法及其计算机程序产品，包括：获取患者的多个模态的医学影像；对各模态医学影像通过特征提取网络分别进行特征提取以生成各模态对应的图像特征；根据各模态的种类，选择与各模态种类对应的分类网络；将各图像特征融合，并输入与各模态种类对应的分类网络得到分类结果。其中，特征提取网络是根据多于各模态种类的训练医学图像经过对比学习损失和分类损失训练的，训练过程中同一患者的训练图像特征为正样本，否则为负样本。本发明通过对比学习和分类学习相结合的方式训练特征提取网络，并针对不同模态组合训练专用分类网络，提高了多模态医学影像分析的准确性和适应性。