摘要
本申请实施例提供一种基于人工智能的情绪识别方法及装置,通过创新性地整合面部图像、语音及肢体动作多模态数据,通过声纹特征实现身份验证。设计多层级注意力融合网络,利用特征注意力层和模态注意力层实现模态内部及跨模态特征的智能融合。结合病历数据构建情绪变化时序模型,融入生理指标进行评估校正,实现对情绪状态的动态评估和精准监护。该方法有效解决了传统技术在多模态融合、时序建模和医疗监护等方面的不足,显著提升了医疗场景下情绪识别的准确性和实用价值。
技术关键词
情绪特征
情绪识别方法
情绪识别模型
声纹特征
注意力
面部图像数据
动作采集装置
医疗监护设备
声音采集装置
对象
时序
图像采集装置
模态特征
序列
跨模态
语音情绪识别
深度神经网络
节点特征