基于语义分割驱动和多尺度特征交互的红外与可见光图像融合方法及系统

本发明公开了一种基于语义分割驱动和多尺度特征交互的红外与可见光图像融合方法及系统，涉及人工智能、图像处理技术领域。包括以下内容：对原始图像进行特征提取，得到多尺度特征图，将特征融合块与注意力机制的结合，对多尺度特征图进行融合，引入多尺度特征交互模块、Transformer块、特征重组模块，进行交互处理以及整合，得到优化后的融合图像，引入语义分割模块，得到语义融合图像，引入联合损失函数，得到处理后的图像。本发明在红外可见光图像融合中，旨在捕捉并保留不同尺度下的特征信息，促进不同尺度信息之间的交互利用，并增加融合图像中语义信息，有效保留图像中的关键特征信息和全局依赖关系。