基于双分支特征分解的跨模态图像差分融合方法及系统

本申请公开了基于双分支特征分解的跨模态图像差分融合方法及系统，涉及图像处理技术领域，包括分别提取待融合的第一模态图像和第二模态图像的低频率基础特征以及高频率细节特征；分别将低频率基础特征和高频率细节特征输入特征融合模块得到对应的基础融合特征和细节融合特征；特征融合模块包括差分补偿模块，差分补偿模块根据输入特征计算差分特征，采用sigmoid函数根据全局平均池化后的差分特征生成信道权重，计算特征补偿值，将特征补偿值与对应输入特征相加作为补偿特征，特征融合模块对补偿特征进行特征重建得到融合特征；拼接基础融合编码特征和细节融合编码特征；解码拼接结果后得到目标融合图像，实现了跨模态图像融合的权重动态分配。