摘要
本发明属于但不限于目标追踪技术领域,公开了一种预测模型器的目标追踪方法及系统,包括:获取视频序列中的图像,将其输入到特征提取网络进行特征提取;将训练帧中的目标信息添加边界框信息编码和位置信息编码,将测试帧也添加编码,同时与深度图像进行特征混合;将来自测试和训练分支的特征进行联合并输入Transformer编码器中,通过训练帧和测试帧间的全局信息推理生成增强特征;Transformer解码器通过Transformer编码器的输出预测目标模型权重;将得到的信息经过线性层得到边框回归权重和目标分类权重,将所得权重结合提取的测试特征进行边界框回归以及实现目标分类。相较于传统优化的模型预测方法,通过扩展模型预测器,从而更准确地预测目标的位置和边界框。
技术关键词
测试特征
追踪方法
编码器
信息编码
特征提取网络
解码器
训练特征
信息数据处理终端
特征提取模块
多层感知器
追踪系统
模型预测方法
注意力
线性
计算机设备
分支
序列
图像获取模块