模态融合的智能视频异常行为监控方法

本发明公开了模态融合的智能视频异常行为监控方法，涉及智能安防监控技术领域，包括以下步骤：利用视频摄像头采集视频模态数据，同时借助音频传感器收集声音模态数据以及通过环境状态传感器获取环境状态模态数据；针对视频数据进行去噪处理，对声音数据进行降噪、滤波操作，环境状态数据进行归一化处理，以提升数据可用性。通过构建的异常行为分析模型并采用独特的分层结构，与传统简单模型相比，能够有效处理多模态数据之间复杂的关联关系，在人员聚集且伴有嘈杂声的场景中，模型可以综合视频中的人员动作、姿态和音频中的声音特征，准确判断是否发生争吵、打斗等异常行为，大大提高了异常行为判断的准确性，降低误判和漏判率。