摘要
本发明提供基于多模态图像的目标跟踪方法、装置、设备、介质及产品,其中方法包括:获取第一图像和第二图像;将第一图像和第二图像分别输入至已训练的目标检测模型的第一特征提取模块和第二特征提取模块中,得到第一初始特征和第二初始特征;将第一初始特征和第二初始特征输入至目标检测模型的特征融合模块中,得到融合特征,将融合特征输入至目标检测模型的检测模块中,得到至少一个目标检测结果;基于目标检测结果,更新至少一个目标的跟踪轨迹;特征融合模块包括N个卷积处理模块和N+1个融合模块,融合模块中包括PAFPN模块。本发明能够更充分地利用来自不同模态的信息,提高目标检测与跟踪结果的准确性。
技术关键词
跟踪方法
特征提取模块
融合特征
多模态
输出特征
轨迹
非暂态计算机可读存储介质
卷积模块
图像获取模块
处理器
分支
卡尔曼滤波
计算机程序产品
跟踪装置
注意力
成像
存储器
场景