一种基于视觉大模型低秩自适应微调的学生行为检测方法

本发明公开了一种基于视觉大模型低秩自适应微调的学生行为检测方法，涉及行为检测技术领域，包括以下步骤：构建本地数据集；在预训练模型中的特定注意力头中引入低秩自适应参数；固定预训练模型的原始参数，利用低秩自适应微调技术在本地数据集上微调低秩自适应参数；重复上一步骤，直到算法收敛，得到适应本地数据分布的学生行为检测模型Wlocal；将微调后的模型Wlocal部署在学校端，实时检测和反馈学生行为。本发明采用上述一种基于视觉大模型低秩自适应微调的学生行为检测方法，通过对预训练模型进行低秩自适应微调，有效地克服了学生行为检测场景中难以获取足够高质量标注数据的问题。