摘要
本发明公开了一种利用CT‑ELCAN的跨主体情绪识别方法,包括以下步骤:在训练阶段,将不同模态的原始生理信号分别通过一维点向卷积独立投影到统一的特征空间中,添加位置编码,再通过多层跨模态Transformer编码器对拼接后的特征进行处理获得包含上下文信息的单模态特征和融合的多模态表示;将提取的特定于模态的特征输入至ELCAN模块,该模块包括c‑SAGAN和LCAN;在测试阶段,LCAN将真实的多模态特征和c‑SAGAN生成的合成样本同时作为输入,输入至LCAN模块中的特征学习模块中进行优化处理,由情绪分类器实现情绪状态的识别。还公开了一种利用CT‑ELCAN的跨主体情绪识别系统。
技术关键词
情绪识别方法
情绪识别系统
模态特征
跨模态
情感分类器
编码器
注意力机制
标签
网络模块
多模态
特征提取模块
对抗性
矩阵
编码模块
主题
序列
生理
系统为您推荐了相关专利信息
模态特征
脑电特征
编码器
查询特征
计算机可执行指令
图像特征向量
文本特征向量
模型部署方法
监控图像数据
桥接器