一种适用于评委异常行为的分析方法、装置及系统

本发明公开了一种适用于评委异常行为的分析方法、装置和系统，所述方法包括以下步骤：通过多个摄像头实时采集评委所在区域的视频流；对获取的视频流进行识别分析；获取视频图像中人物对象的脸部图像及身体的关节点坐标信息；得到姿态特征信息矩阵S1；利用MTCNN提取人脸区域，表示为K1；将人体表情信息K1和人体姿态信息S1进行融合，表示为特征矩阵S2；将融合后的特征矩阵通过具有噪声鲁棒性的残差网络的异常行为识别模型，得到人体姿态最终行为识别结果；提取视频流中的音频信息，对音频信息分别进行文本转换及关键词提取，得到音频关键词集，对异常行为进行预测，得到异常行为预测结果。本发明监测准确，可应对各种场景。