摘要
本发明涉及情绪识别技术领域,具体是涉及一种情绪识别方法、装置、设备及存储介质。本发明首先采集个体的语音信号、人脸视频流以及人体动作视频流,之后确定语音信号的功率谱,并从功率谱上提取语音特征,以及从人脸视频流上提取人脸特征,从人体动作视频流上提取人体动作体态特征,对上述三个特征应用神经网络模型,得到该个体的情绪识别结果。由于语音特征、人脸特征和人体动作体态特征这三者是相关联的,也就是个体的情绪能够同时影响这三个特征,因此,本申请采用这三个特征识别个体的情绪,能够提高情绪识别的准确性。
技术关键词
情绪识别方法
体态特征
视频流
语音特征
人脸特征
脉冲神经网络模型
图像采集设备
人脸深度
语音采集设备
人体
信号
时间差
分数阶傅里叶变换
情绪识别技术
情绪识别装置
功率
频率
系统为您推荐了相关专利信息
对齐模块
监督学习方法
多模态特征
音视频解码
矩阵
眼动检测方法
眼动检测装置
图像采集系统
输入神经网络模型
视频流
行人重识别模型
重识别方法
卷积神经网络提取特征
多任务损失函数
注意力机制