摘要
本发明公开了一种基于大模型的多模态课堂评价系统,属于多模态数据处理技术领域,其包括多模态数据采集模块,用于同步采集视觉数据、语音数据及环境传感数据;分心评估模块,用于根据预训练的大模型识别学生行为是否存在行为异常;多模态验证模块,用于在存在行为异常时,利用视觉数据、语音数据和环境数据计算得到行为置信度;行为决策模块,用于根据行为置信度的大小,判断是否存在误判。本发明通过多模态验证来消除误判,提高课堂监控的准确性和可靠性。
技术关键词
评价系统
视觉
语音
多模态数据采集
记录材料
面部关键点
知识点
学生
编码
分析单元
文本
标记
模块
光照
数据处理技术
噪声
三维模型
系统为您推荐了相关专利信息
三维点云数据
重构方法
生成对抗网络
深度卷积神经网络
稠密深度图
多阶段特征
语音识别方法
交互式特征
语音识别模型
融合特征
户外高空作业
机械腿
高压雾化
视觉传感器
真空吸盘
协同注意力
嵌入特征
视觉特征
融合特征
大语言模型