摘要
本发明公开了一种基于T‑WavKAN和C‑Corr的红外与可见光图像融合方法。T‑WavKAN采用了一个可学习的小波激活函数,能够有效表示文本的复杂结构,捕捉区分不同交通目标所需的高频和低频信息。C‑Corr增强了共享视觉特征之间的关系,同时最小化特定特征之间的联系,从而改善了融合图像的整体特征表示。这种方法通过文本语义促进了视觉特征的融合,推动了视觉‑语言模型在交通场景下的红外与可见光图像融合的应用。大量实验表明,本发明在视觉质量和定量评估方面超越了多种最先进的方法,尤其在与交通监控相关的任务上表现出色,包括目标检测、语义分割和实例分割。
技术关键词
可见光图像
融合方法
视觉特征
交叉注意力机制
智能交通监控系统
语义
文本编码器
图像编码器
实例分割
移动车辆
融合特征
矩阵
节点数
符号
系统为您推荐了相关专利信息
入侵检测系统
视频采集模块
入侵检测方法
关键点
分析模块
基底特征
综合检测方法
多模态
缺陷尺寸
缺陷类别