基于可见光-红外图像的轨道站台目标跟踪方法、装置

本发明涉及轨道感知领域，提供了一种基于可见光‑红外图像的轨道站台目标跟踪方法、装置，该方法包括：基于零样本图像恢复策略，对第一可见光图像进行预处理，得到第二可见光图像；所述零样本图像恢复策略包括输入初始化、反投影引导和噪声注入机制；将所述第二可见光图像和红外图像输入至跨模态调控注意力模型中，得到预测的目标位置；所述跨模态调控注意力模型包括基于Transformer的可见光‑红外跟踪器、Transformer块、跨模态调控注意力单元和跟踪预测头。本发明解决了现有技术中可见光图像在复杂环境下易受干扰、目标跟踪精度低的问题，提高了目标跟踪的鲁棒性和准确性。