摘要
本发明涉及一种基于多模态的微表情识别方法,包括数据采集获得人脸图像和深度图像、数据预处理去除冗余信息并获取光流图和深度差信息、模型训练、模型部署等,数据采集还用于获取待识别对象的数据并输入至训练好的微表情识别模型;最终,识别模型输出待识别数据的预测结果。本发明的基于多模态微表情识别系方法,能够根据测试对象的图像数据进行分析,并自动对该测试对象的微表情状态进行归类识别,较单模态识别系统及方法,性能更优。
技术关键词
表情识别方法
融合特征
支路
多模态特征
面部
输入模块
多尺寸卷积核
模态识别系统
网络
动态变化特征
微表情数据
采集人脸图像
空间结构
微表情识别
代表
原始图像数据