基于多模态表征融合的网络平台用户情感识别方法及装置

本发明公开了一种基于多模态表征融合的网络平台用户情感识别方法及装置，方法包括：单模态的高级语义表示通过一致性与差异性表征模块获得模态一致性表征与模态差异性表征；差异性滤波器通过门控的方式滤除模态差异性表征中负面的、冗余的噪声信息；互补性表征模块以滤波后的模态差异性为引导信息，通过多式联运和注意力机制生成多模态互补性表征；将平台用户信息作为一种额外的先验信息嵌入到融合层中；采用通用融合层结构自适应的融合模态一致性表征、模态差异性表征、模态互补性表征以及用户信息以生成全局语义表示；最后将全局语义表示通过分类器输出平台用户的情感状态，网络平台根据用户的情感状态促进平台用户体验的优化。装置包括：处理器和存储器。