一种微格教学的视频和语音智能的评价方法及系统

本发明涉及计算机视频与语音识别与分析领域，公开了一种微格教学的视频和语音智能的评价方法及系统，其中方法具体包括以下步骤：采集微格教学过程中的视频和音频数据；对音频数据进行语音识别、节奏识别、情感识别，提取音频特征；对视频数据进行指势识别、面部表情识别、姿势识别和头势识别，提取视频特征；构建基于前置归一化模态特征融合神经网络的微格教学评价模型；基于决策树改进算法，采用所述的微格教学评价模型分析所述视频特征和音频特征，生成教学评价结果。本发明解决了现有技术无法综合考虑多模态特征进行自动评估的问题，且具有能使微格教学评价标准化、系统化的特点。