摘要
本发明提供了一种基于多模态AI的课堂行为与情绪协同分析系统,属于人工智能与教育技术交叉领域,包括:多模态数据采集模块、预处理模块、特征提取模块、协同分析模块以及实时反馈模块,其中:多模态数据采集模块用于通过红外摄像头、定向麦克风阵列、可穿戴设备及电子白板,同步采集视觉、语音、生理信号及文本数据;预处理模块用于对数据执行时间戳同步、小波去噪及归一化处理。本发明,通过集成多模态数据采集与处理模块,实现课堂行为与情绪的多维度实时监测;同时结合动态权重调整与图神经网络融合技术,提升行为‑情绪关联分析的全面性和准确性;同时基于边缘计算的实时反馈模块,确保教学干预策略的低延迟输出,增强系统实用性。
技术关键词
协同分析系统
多模态数据采集
神经网络融合技术
信号特征提取
定向麦克风
可穿戴设备
频域特征
同步算法
红外摄像头
特征提取模块
Softmax函数
协同分析方法
电子白板
节点
生理特征数据
差分隐私技术
隐私保护模块
语音特征提取
视觉特征提取