一种基于改进SlowFast的挖掘机行为识别方法

本发明公开了一种基于改进SlowFast的挖掘机行为识别方法，包括以下步骤：(1)实时采集水利施工现场的挖掘机行为视频，进行预处理，划分训练集与验证集；(2)将训练集送入目标检测器，即YOLOv5模型中，生成多个感兴趣区域(RoI)，从而完成目标定位的任务；(3)在获得目标定位之后，Deepsort作为目标跟踪器，持续标注目标坐标，检测对象的运动轨迹；(4)使用改进的SlowFast模型提取的特征图中裁剪相应的区域，将其进行感兴趣区域对齐处理，以统一区域的尺寸；(5)将得到的感兴趣区域的特征向量在时间维度进行平均池化，再连接一个全连接层完成多标签行为分类任务；本发明适应不同的施工场景，具有广泛的应用前景。