摘要
本发明提供了一种基于相关性约束和注意力引导的医学图像融合方法和系统,可应用于医学影像处理技术领域。该方法包括:利用具有相关性约束的特征提取模块对通道拼接图像、预处理后的MRI图像和预处理后的CT图像进行多层次特征提取,得到MRI图像多层次特征、CT图像多层次特征和通道拼接图像多层次特征;利用具有注意力引导机制的特征融合模块将MRI图像多层次特征、CT图像多层次特征和通道拼接图像多层次特征在每个共同层次上进行双层交叉注意力的特征融合,得到通道数不同的多层次融合特征;利用医学图像融合网络的特征重建模块对通道数不同的多层次融合特征进行拼接,并对通道拼接融合特征进行多模态医学图像重建,得到医学图像融合结果。
技术关键词
多模态医学图像
特征提取模块
卷积特征
融合特征
多层次特征提取
注意力
医学图像融合方法
网络
机制
多通道特征融合
样本
图像融合系统
图像重建
冗余度