摘要
本发明公开了一种基于多模态特征融合的情绪识别方法及系统,该情绪识别方法构建了适合于时间序列特征提取的情绪识别模型,通过量化的情绪标签与注意力机制训练各个模态的权重并融合,最后通过输出层进行情绪量化分类;同时通过采集脑电信号、脉搏信号、语音信号三种模态的数据,作为情绪识别模型的输入数据。本发明通过结合多模态数据,能够更全面地反映人的情绪状态,提高情绪识别的准确性和鲁棒性;同时,本发明通过实时采集和处理数据,实现对受试者情绪状态的实时监测和预警;此外,本发明利用深度学习算法对特征进行自动提取和分类,避免了传统方法中人工特征提取的复杂性和主观性。
技术关键词
多模态特征融合
情绪识别方法
情绪识别模型
门控循环单元
情绪识别系统
特征提取模块
Softmax函数
序列
脉搏
数据采集模块
采集脑电信号
成分分析方法
深度学习算法
评定量表
带通滤波器
系统为您推荐了相关专利信息
情感分类方法
模态特征
文本
动态门控
情感分析方法
情绪识别方法
生理
随机梯度下降
样本
训练受试者
热力管道
前馈神经网络
寿命预测方法
门控循环单元
数据
智能书法
AI深度学习
短时傅里叶变换
高分辨率摄像头
多模态特征融合
跨模态
统计特征
统计序列特征
融合多模态特征
门控循环单元