一种基于Transformer与改进VGG16模型的学生课堂行为检测方法

本发明公开了一种基于时空Transformer与改进VGG16的课堂行为检测方法，该方法包括以下步骤：采集课堂监控视频并转换为包含时序信息的连续帧序列，构建涵盖10类具体行为的数据集；采用改进的VGG16网络提取空间特征，通过在第四、第五卷积块引入通道注意力模块(SE Block)增强关键特征表达，并结合多尺度特征金字塔(FPN)提升小目标检测能力；利用时空Transformer建模帧间时空依赖关系，捕捉学生动态行为的连续性；设计动态阈值机制，将检测结果自适应划分为“专注”“分心”“互动”“离座”四类行为状态，通过置信度得分和时序连续性优化分类准确性。