一种面向变电站安防的多模态行为识别方法及系统

本发明公开一种面向变电站安防的多模态行为识别方法及系统，方法包括获取变电站内外人员的动作数据，包括WiFi信道状态信息图像数据和距离‑多普勒图像数据，基于预先训练的行为识别模型，得到变电站内外人员动作的分类预测结果，使用MobileNetv4网络替换VGG19网络改进OpenPose算法，提取变电站内外人员动作视频帧中的人员动作姿态作为标签训练行为识别模型；使用带有卷积注意力模块的VGG16网络提取距离‑多普勒图像数据，将WiFi信道状态信息图像数据和距离‑多普勒图像数据进行特征融合。本发明实现了在有效识别人员行为的同时，最大限度地保护了变电站的隐私和数据安全，有效避免了敏感信息的泄露和滥用。