摘要
本发明提出一种基于场景‑语义解离的可见光与红外图像融合方法,所述方法采用多级编码‑融合网络,通过融合模块来实现场景‑语义解离和融合策略,具体为分别提取和融合场景及语义相关特征,并将融合语义注入场景特征,丰富融合特征中的上下文信息,同时保持融合图像的保真度,同时进一步引入元特征嵌入,在训练过程中连接编码‑融合网络与下游应用网络,通过增强语义提取能力来优化融合效果并服务于语义分割任务;本发明的该方法增强得到的红外与可见光融合图像,可以在融合特征中保留丰富的场景信息,并增强融合特征中的上下文信息,优化下游任务的性能。
技术关键词
红外图像融合方法
融合特征
图像重建
场景特征
语义特征
编码器
融合策略
生成融合图像
可见光图像
分支
阶段
融合场景
网络
融合语义
解码器
注意力机制
系统为您推荐了相关专利信息
运动姿态识别
卷积模块
关节点
运动姿态数据
评价方法
FMCW雷达
跌倒预测方法
网络
交叉注意力机制
数据
芯片检测系统
多模态数据采集
智能检测模块
融合特征
芯片检测方法