基于语义融合的铁路异物检测方法、装置、设备及介质

本发明公开了一种基于语义融合的铁路异物检测方法、装置、设备及介质，该方法包括如下步骤：对获取到的铁路实时图像进行图像编码，获得图像编码特征；根据目标查询，对图像编码特征进行解码，获得目标区域特征；根据铁路实时图像对应的类别语义特征，更新预设的历史图像视觉库，获得多图像视觉库；将目标区域特征与多图像视觉库中的异物类别特征进行匹配，获得异物检测结果。本发明方法通过多图像提示的语义交集学习，提高了在复杂场景中检测未知类别异物的能力，在保持高准确率的同时显著降低计算成本，实现了对开放集环境的实时适应。