摘要
本发明提出基于两阶段对抗训练和边缘感知的图像融合方法及系统,属于图像处理领域。方法:选取红外‑可见光样本图像对数据集,合并成对图像得到初始合并图像;构建包含双向交互编码器、双分支解码器和判别器的融合特征生成对抗模型,将初始合并图像输入双向交互编码器,经多尺度特征增强与高低频特征分解模块增强特征,获多尺度融合特征后输入双分支解码器融合重建红外、可见光图像特征,形成融合特征。再将其输入判别器,依两阶段训练策略训练模型至损失函数收敛,基于训练好的模型对待融合合并图像进行融合。通过设计两阶段训练策略并引入边缘特征增强机制,实现频率域的精细化处理,提升特征提取和融合效果及融合图像的质量。
技术关键词
融合特征
图像融合方法
可见光图像
两阶段
生成对抗模型
多尺度特征
编码器
交互机制
解码器
分支
输入多尺度
卷积特征
高频特征
特征提取模块
样本
图像融合系统