一种多模态融合技术的输送皮带异常检测方法和系统

本申请公开了一种多模态融合技术的输送皮带异常检测方法和系统，涉及输送皮带异常检测术领域，以精准判定输送皮带异常。包括：接收图像数据和音频数据；利用异常检测分类模块，分别根据图像数据初始特征和音频数据初始特征进行异常的检测，输出图像异常监测结果和音频异常监测结果；将图像数据和音频数据输入到多模态融合异常识别模型中进行异常状态的识别；多模态异常识别模型通过将图像数据和音频数据进行融合，根据融合后的多模态特征进行异物识别，输出融合数据异常识别结果。根据图像异常监测结果、音频异常监测结果和融合数据异常识别结果进行交叉验证，得出最终的识别结果。本申请能够确保在复杂工况和环境下仍能准确判定异常状况。