一种基于对比约束和IDFAM的多分支医学图像融合方法

本发明公开了一种基于对比约束和IDFAM的多分支医学图像融合方法，涉及图像融合技术领域，包括在编码层阶段，将成对的源图像分别送入私有特征提取分支，在私有分支中，设计了多尺度残差模块和梯度密集连接模块，并将其交替利用，以有效提取各个模态的独有特征；同时将源图像放入公有特征提取分支提取互补信息，设计了信息交互的机制，以确保充分提取互补信息；其次，对公有分支和私有分支分别构建了融合深层特征的注意力机制，在融合层，我们将三条路径提取的特征采用Concatenation和卷积策略进行融合。在解码层，我们采用残差的解码器网络，通过解码器前三个卷积层重建公共和私有特征，最终的融合图像通过解码器的最后一层卷积重建。