一种针对复杂照明环境下的红外可见光图像融合方法

本发明提供一种针对复杂照明环境下的红外可见光图像融合方法，方法包括：分别获取多种场景下配准后的多对红外图像和可见光图像形成训练图像子集，以得到训练数据集，并将训练数据集利用场景感知网络进行标识；将标识为夜间场景的训练图像子集输入到掩膜建模算法，以生成指导网络训练的掩膜；构建分层式红外可见光图像融合网络；构建损失函数指导分层式红外可见光图像融合网络训练。根据本发明通过用场景感知网络和掩码建模算法构造融合损失，以适应不同光照场景；还通过设计梯度增强模块在特征层面增强混合模态中的纹理信息；本发明还通过在深度语义层面引入多尺度语义交互模块有效利用双模态特征中的语义信息。