摘要
本发明属于深度学习技术领域,公开了一种提示表示解析的红外和可见光图像融合方法,在提示提取阶段将配对的红外和可见光图像输入到共享编码器中初步提取提示向量;在提示解析阶段,通过两个余弦相似度计算来约束内容语义提示和风格语义提示相互解析;在图像重构阶段,利用重构损失和提示解析阶段的余弦相似度损失来约束两个图像重构器分别利用内容和各自的风格提示重构出红外和可见光图像。经过以上阶段,得到了纯净的内容提示,以便利用其指导图像融合过程。
技术关键词
可见光图像
融合方法
风格
重构
矩阵
解码器
阶段
像素点
语义向量
交叉注意力机制
深度学习技术
图像编码器
采样模块
融合特征
上采样