基于元组扰动的双模态图像融合方法、装置及存储介质

本发明提供一种基于元组扰动的双模态图像融合方法、装置及存储介质，涉及图像融合处理技术领域；通过采集跨模态图像组，构建包含编码器、特征融合网络和解码器的模型；基于元组扰动对比学习框架训练编码器，可挖掘跨模态共享与互补特征，通过元组扰动模块构建可学习的正负样本对，避免依赖同一模态，增强泛化性；特征融合网络利用跨模态深层特征进行互补特征融合和多尺度语义聚合训练，提升融合图像质量；多尺度语义聚合解决了细节丢失问题，空间特征校准强化细节，使融合图像保留双模态特性，增强语义一致性；构建组合损失函数，综合像素强度与梯度结构差异优化模型，提高性能与鲁棒性，确保融合图像保留关键信息，视觉效果与准确性更优。