受记忆检索和跨模态交互启发的对话情绪识别方法及装置

本发明涉及多模态识别技术领域，特别涉及受记忆检索和跨模态交互启发对话情绪识别方法及装置。方法包括：设计了动态记忆选择器，它能够实现自适应的、特定于模态的上下文检索，从而实现更准确的上下文嵌入。HierSensNet则模拟了大脑的层次跨模态交互机制，捕获了复杂的跨模态相互关系和互补性，促进了充分的多模态融合。在基准数据集上的实验结果证明了其有效性和优越性。本发明旨在解决ERC任务中面临的僵化的上下文依赖和多模态融合不足的局限性。