摘要
本发明公开了一种基于空间域和频域信息的红外和可见光图像轻量融合方法,包括:将红外和可见光图像作为输入,经过模型各模块处理后,生成具有显著热目标和丰富背景纹理的融合图像。本发明的方法主要分为空间域和频域两个分支,其中空间域分支将原始红外和可见光图像细化以提升不同模态的图像语义表征,而频域分支主要进行图像的频域融合。最后,两个分支的输出被拼接在一起并输入到由多个卷积层构成的融合模块中,由该模块输出最终的融合图像。本发明基于并行处理结构,以充分提取频域和空间域中两种模态的有效信息,从而生成质量良好的融合图像,整体流程简洁,具有出色的推理效率,可作为下游视觉任务的预处理模块并提升下游视觉任务的性能。
技术关键词
可见光图像
融合方法
三分支结构
注意力
并行处理结构
幅值
通道
纹理
元素
模块
视觉
语义
冗余