语义先验引导红外和可见光图像融合方法、系统、设备及存储介质

一种语义先验引导红外和可见光图像融合方法、系统、设备及存储介质，融合方法包括：获取公共数据集，划分训练集和测试集；建立基于预训练视觉模型的融合的模型，采用公共数据集对深度学习网络模型进行预训练，生成初始识别模型；利用预训练模型提取全局和局部语义先验，然后在语义自适应融合网络中使用这些先验，通过语义自适应融合模块和深度语义自适应融合模块指导融合过程，自适应调制来自输入的模态特定，视觉解码器将融合后的特征重构为最终的输出图像；利用公共数据集进行实验，通过划分的数据集和测试集得到实验结果，定量评价融合性能。本发明解决了现有技术中融合方法依赖手动标签的局限性，并且难以适应不同对象的自适应融合的问题。