一种基于情感演变序列回溯学习的多模态共情回复生成方法

本发明涉及一种基于情感演变序列回溯学习的多模态共情回复生成方法，旨在利用用户情感特征序列的关联关系，帮助对话模型更好地理解用户情感并与用户开展共情交流。主要包括以下发明内容：(1)提出了一个全新的基于用户情感演变序列回溯学习的多模态共情回复生成框架。(2)提出了一种多模态共情数据集的数据增强方法。(3)提出了一种基于点积注意力的多模态用户情感检测器。(4)提出了一种基于共情策略回溯学习机制的共情回复生成器。