摘要
本发明提出一种基于Mamba视觉混合模块的目标跟踪方法与系统,该方法包括:将搜索图像和模板图像输入至Mamba视觉混合模块中,提取并叠加全局上下文信息和局部细节信息;将Mamba视觉混合模块的输出输入至特征融合模块中进行融合;将特征融合模块的输出利用特征提升模块进行特征增强,得到增强后的特征;用大规模数据集对优化后的跟踪模型进行预训练,并对跟踪模型的参数进行更新;将搜索图像和模板图像输入至参数更新后的跟踪模型中,得到跟踪结果。本发明设计特征聚合网络,利用图像状态空间模块整合搜索区域的历史状态信息,将历史状态信息与交互后的特征沿通道方向进行拼接,通过卷积、激活、归一化、跳跃连接的方式实现特征的有效聚合过滤不相关信息。
技术关键词
混合模块
空间模块
矩阵
图像
视觉
分支
跟踪方法
状态空间模型
全局平均池化
通道
上下文特征
模板特征
注意力
输出特征
序列
参数
标记
设计特征