基于多模态融合的异物入侵检测方法及系统

本申请提供一种基于多模态融合的异物入侵检测方法，应用于自动扶梯，所述方法包括以下步骤：响应于所述自动扶梯的工作指令，获取第一传感信号以及异物检测图像；根据预设的振动检测模型，对所述第一传感信号进行异动识别，获取对应的异物入侵振动置信度；根据预设的视觉检测模型，对所述异物检测图像进行异物识别，获取对应的异物入侵视觉置信度；对所述异物入侵振动置信度以及所述异物入侵视觉置信度进行加权融合，获取相应的融合结果，若所述融合结果不在预设的阈值范围内，则判断所述梳齿板产生异物入侵。因此，通过应用本申请的技术方案，能够有效地提高对自动扶梯的梳齿板的异物入侵检测效率，提升对应的异物入侵检测精度，降低误检率。