基于中期融合元框架和复合视觉提示的RGBT目标跟踪方法

本发明公开了基于中期融合元框架和复合视觉提示的RGBT目标跟踪方法，涉及视觉目标跟踪技术领域，包括预训练的上游RGB跟踪网络并嵌入到中期融合多模态跟踪元框架中和利用三种视觉提示策略构建RGBT提示跟踪网络，然后在RGBT跟踪训练集上对网络进行提示微调；提示跟踪方法中包括一种中期融合元框架和单模态和跨模态探索提示策略、中间融合提示策略、模态与阶段感知提示策略。本方法通过极少量需要微调的额外参数实现上游知识在当前任务上参数高效的知识迁移，极大地减少了训练设备的负担，充分释放了提示学习在RGBT跟踪任务中的巨大潜力，并在模态主导性动态变化的多种复杂开放场景中实现了鲁棒的RGBT跟踪。