一种基于面部关键点时空特征融合的情绪检测方法

本发明公开了一种基于面部关键点时空特征融合的情绪检测方法，属于计算机视觉和情感计算领域。本发明通过获取公开数据集并进行预处理，得到68个面部地标；设计PLK算法估计面部地标的运动状态，并通过双向光流机制和卡尔曼滤波对地标去噪，得到准确的地标位置信息；通过BiGRU单元对得到的准确面部地标的绝对位置和相对变化进行建模，提取出面部地标的时序特征；构建面部关键点图结构，并结合面部地标的时序特征送入图卷积网络进行迭代更新，得到时空融合的面部特征；将得到的时空融合的面部特征送入线性层进行分类，得到情绪识别结果。本发明实现了情绪相关的时序特征和空间特征的全面提取，为面部情绪的检测提供了高效、高准确性的方法。