摘要
为解决现有技术存在的不足,本发明提供一种基于多模态信息融合的目标认知诊断方法,包括:从视频信息中截取图像信息,经过图像处理分析后输出各目标的目标图像。根据目标图像分析得到目标的静态特征,并根据静态特征得到目标姿态信息,进而对目标的全部姿态信息进行姿态分类。根据预设时间段内同一目标的全部目标姿态信息,经过注意力分析得到目标注意力信息。获取试题数据并进行试题数据分析得到试题信息。将目标注意力信息与试题信息结合,进行目标认知诊断分析,得到认知诊断评分结果。本发明不仅实现了对静态姿态的识别,并且将学生课堂注意力得分数据与试题得分数据进行多模态融合,更全面地理解学生在课堂中的表现和学习状态。
技术关键词
认知诊断方法
多模态信息融合
课堂注意力
关键点
启动人脸识别
Inception结构
轮廓信息
图像处理
静态特征信息
专家系统
卷积网络模型
图像分析
试题内容
学生
人脸位置
数据
人体模型
系统为您推荐了相关专利信息
图像处理模型
人工智能图像处理
模型构建方法
接口
数据
胸椎
深度卷积神经网络
腰椎
体测一体机
生成受试者
生命探测仪
处理器
视频
人脸识别技术
面部关键点检测
碰撞预警系统
车辆行驶状态
驾驶员反应时间
人脸关键点检测
三维人脸模型