摘要
本发明公开了一种课堂互动分析方法、装置、边缘设备及存储介质,包括:采集课堂中的多模态数据,多模态数据包括语音信息、表情信息和姿态信息;计算语音信息对应的第一信息熵变化率,在第一信息熵变化率超过预设的第一变化率阈值时,计算姿态信息对应的第二信息熵变化率,在第二信息熵变化率处于预设的第二变化率阈值区间范围时,根据第一信息熵变化率调整语音信息的投影权重,根据第二信息熵变化率调整姿态信息的投影权重;根据课堂的光线条件调整表情信息的投影权重;基于调整后的投影权重将语音信息序列、表情信息序列和姿态信息序列投影至特征平面,形成互动特征;将互动特征输入至训练完成的卷积神经网络,得到课堂互动分析结果。
技术关键词
信息熵
互动特征
语音特征
分析方法
人体轮廓
序列
计算机可执行指令
骨架模型
多模态
灰度共生矩阵
数据
投影模块
处理器
分析装置
输入模块
投影面
存储装置
注意力
系统为您推荐了相关专利信息
挖掘分析方法
训练神经网络模型
关系
关键词
数据
量子纠缠源
氮化硅材料
系统动力学模型
微环谐振腔
微腔
试剂管
图像识别模型
位置分析方法
坐标系
试剂盒
文件管理方法
多层次
随机森林模型
大数据
聚类分析方法
建筑震害评估方法
评估模型训练方法
人工神经网络
数据
地震