摘要
本发明公开了多粒度注意力与特征分布校准的双模态情感识别方法,步骤如下:步骤1、获取样本集;步骤2、搭建MGA‑FDC模型;步骤3、用训练集中数据片段训练MGA‑FDC模型,得到训练好的MGA‑FDC模型;步骤4、用测试集中的数据片段对训练好的MGA‑FDC模型测试,得到情感识别模型;步骤5、将待识别样本输入到上述情感识别模型即可进行该待识别样本的EEG信号以及图像样本情感识别。本申请搭建的MGA‑FDC模型在相较于目前方法具有最优的性能表现,可以更为有效地完成基于EEG信号和人脸图像的双模态情感识别任务,对于实际应用而言更具有现实意义。
技术关键词
情感识别方法
模态特征
情感识别模型
人脸图像特征
注意力
信号特征
校准
卷积长短期记忆
输出特征
卷积模块
样本
情感类别
全局平均池化
分类器
代表
人脸图像数据
双模态
系统为您推荐了相关专利信息
动态调控系统
多源融合
动态调控方法
液压支撑系统
路基
负载设备
识别方法
动态位置编码
融合特征
动态时间规整算法
高分遥感影像
水体提取方法
多光谱遥感影像
特征提取模块
注意力机制
生成对抗网络
多头注意力机制
数据处理单元
特征提取单元
预测系统