摘要
本发明公开了一种基于认知共情增强的人机双向理解系统及其实现方法,包括:多模态感知单元,配置为通过多源传感器同步采集用户的生理行为数据及环境情境数据;共情建模引擎,包含依次连接的表层情绪识别模块、深层动机推理模块和文化适配模块,其中:所述表层情绪识别模块配置为执行多模态特征融合;所述深层动机推理模块内置心智理论模型;所述文化适配模块连接动态更新的地域化知识库。本发明相较于传统的理解系统,采用了混合神经网络与贝叶斯推理的复合建模方法,在表层情绪识别阶段通过时序卷积网络捕获微表情动态特征,同步利用双向长短期记忆网络解析语音情感线索,有效克服传统单模态情绪识别存在的误判率高、环境干扰敏感等问题。
技术关键词
理解系统
多模态特征融合
人机
动态更新
识别模块
复合建模方法
语音采集装置
注意力机制
环境光传感器
空间声场
光流特征
理论
传感器阵列
网络
地理围栏
生理
系统为您推荐了相关专利信息
异形工件表面
图像处理模块
数据转换单元
识别模块
机器人检测技术
多无人机编队
协同控制方法
数字孪生模型
三维环境模型
动态障碍物