一种基于多模态传感的智能安防监控方法及系统

本发明公开了一种基于多模态传感的智能安防监控方法及系统，方法包括：获得时间同步后的多模态传感器数据；构建多目标优化模型，将所述时间同步后的多模态传感器数据输入多目标优化模型进行处理，获取传感器的最优部署方案；根据最优部署方案部署多模态传感器并采集数据，获得统一的多模态表示向量；基于统一的多模态表示向量进行目标检测，获得检测到的目标信息；针对检测到的目标信息构建基于时空图卷积网络的行为识别模型；采用边缘计算对目标多模态传感器数据进行特征提取，将提取的高层特征上传至行为识别模型，实现异常行为的实时检测与预警。本发明有效解决了智能安防中多模态数据处理的关键问题。