摘要
本发明公开一种红外光与可见光图像融合方法和装置、系统、存储介质,包括:获取可见光‑红外光图像;将可见光‑红外光图像输入到图像质量评估网络进行判别退化类型,得到退化文本描述特征;将退化文本描述特征和可见光‑红外光图像输入到多模态图像融合网络进行特征学习和融合;基于融合结果进行多损失项计算,得到融合网络目标损失函数;对融合网络目标损失函数进行自适应优化调整,获得最终训练好的多模态融合网络系统并实现任意质量输入多模态图像的融合。采用本发明的技术方案,解决现有图像融合中忽略源图像存在退化的缺陷导致无法智能自适应得到最理想融合结果的问题。
技术关键词
可见光图像
红外光
融合方法
融合网络系统
融合装置
交叉注意力机制
文本
多模态
融合系统
模块
处理器
存储器
颜色
系统为您推荐了相关专利信息
羊绒羊毛识别方法
矩阵
构建分类模型
稀疏系数向量
重构
厚度检测模块
涂布模块
恒温箱体
医药
膜分离模块
心理干预系统
红外光
脑功能监测
建立特征数据库
近红外脑功能
可见光图像
多尺度特征提取
拼接方法
图像拼接
注意力
融合增量学习
模型预测控制方法
状态空间方程
状态空间模型
模型预测控制技术