一种基于运动学习和图像特征表示融合的微表情识别方法

本发明属于表情识别领域，提供了一种基于运动学习和图像特征表示融合的微表情识别方法，其技术方案为：包括运动学习流、图像特征表示流和异构信息融合机制三个组成部分。首先，运动学习流从帧间运动信息中提取与微表情相关的多尺度面部肌肉运动特征；其次，图像特征表示流从顶帧图像中，逐步提取局部和全局的面部细节和语义特征；最后，提出了异构信息融合机制，实现运动特征与图像特征之间的信息交互和分类信息的融合。具体来说，交叉融合模块旨在融合从两个流中提取的特征，从而产生更全面、更丰富的图像特征和运动特征相互影响和增强的表示。结果整合策略将两个流的结果作为模型的分类结果，进一步整合不同的特征信息。