知识增强的产品问答社区用户对话情绪识别方法和系统

本发明提供一种知识增强的产品问答社区用户对话情绪识别方法、系统、存储介质和电子设备，涉及对话情绪识别领域。本发明通过用户关键词提取和词典扩展算法，构建用户个性化情感词典，获取偏好知识嵌入向量；通过跨模态Transformer，融合情感知识增强的对话文本嵌入向量、对话视觉嵌入向量和对话音频嵌入向量，获取知识增强后的对话特征向量；基于对话情境GCN网络，考虑多轮问答信息中的上下文以及对话用户之间的情境关系，获取全局情境向量；考虑全局情境向量与对话特征向量之间的交互作用，进行个性化情绪识别。此外，提出基于情感层与多模态层的双层有监督对比学习策略，促使模型学习到更具判别性的多模态特征表示，进一步提高情绪识别的准确性和细粒度。