一种基于深度神经网络的矿车轨道异物检测方法及系统

本发明属于目标检测技术领域，提供了一种基于深度神经网络的矿车轨道异物检测方法及系统，包括：获取矿车轨道的实时图像和文本提示词；提取所获取的实时图像的层次式多模态特征；采用多模态深度神经网络融合得到的层次式多模态特征和文本提示词，得到矿车轨道的图文融合特征；根据所得到的矿车轨道的图文融合特征和预设的异物检测模型，检测矿车轨道是否存在异物；当存在异物时，识别异物尺寸并确定异物位置，完成矿车轨道异物的实时监测。