摘要
本发明提出一种基于多流视觉‑光谱‑空间适配器的高光谱目标跟踪方法。主要解决现有不同波段间信息交互不够导致跟踪性能不佳的问题。包括:1)对高光谱图像数据进行分组和预处理,得到高光谱图片组和伪色彩图片;2)由归一化层、多头注意力层、全连接层组成单流视觉块,同时由N个单流视觉块并列构建多流高光谱块;3)将高光谱图片组和伪色彩图片分别送入两种块中,提取光谱‑空间特征和视觉特征;4)构建双向视觉‑光谱‑空间适配器对特征进行处理,并分别反馈给相应的块;5)在两种块中分别进行特征融合,对输出特征再次融合后送入预测头,获取跟踪结果。本发明能够有效融合来自不同波段的信息,降低计算成本,显著提升跟踪的性能。
技术关键词
适配器
视觉特征
图片
跟踪方法
色彩
预训练模型
立方体
线性
注意力
参数
输出特征
融合特征
广义
数据
图像
坐标
代表
误差
通道
系统为您推荐了相关专利信息
建筑物框架
建筑物三维重建方法
单幅遥感影像
神经网络模型
屋顶
语义相关度
查询方法
手册
车辆数据处理技术
查询设备
模块化电源适配器
接口协议电路
电源调压电路
整流滤波模块
电源开关模块
空域特征
人脸图片
伪造视频检测方法
时域特征提取
卷积神经网络提取