摘要
本发明公开了基于多模态融合的机器视觉情感识别与交互系统及其方法,包括:获取用户的多模态情绪表达数据与用户基础信息数据,并构建用户情绪特征初始识别模型,利用所述用户情绪特征初始识别模型进行计算,得到原始情绪识别结果;基于所述原始情绪识别结果获取用户长期交互过程中的历史识别偏差数据并进行预处理,得到处理后的个体情绪基线数据集;利用所述个体情绪基线数据集对所述用户情绪特征初始识别模型进行优化,构建用户特征自适应情绪识别模型;基于所述用户特征自适应情绪识别模型进行多模态情绪识别预测。本发明通过显著提升了多用户识别场景下的情绪判别准确率,克服了用户间表达差异带来的误识别问题。
技术关键词
识别偏差
情绪识别模型
情绪特征
交互方法
多模态情绪
视觉
数据
基线
交互系统
注意力
音频
生理
多模态信息
权重机制
多用户
时间段
速率
嵌入特征
系统为您推荐了相关专利信息
语音交互方法
计算机程序产品
识别用户语音
语音交互设备
语音交互装置