基于多模态的对话回复方法和装置、电子设备及介质

本申请实施例提供了一种基于多模态的对话回复方法和装置、电子设备及介质，属于人工智能技术领域，适用于金融科技领域。该方法包括：通过将问题文本特征和用户信息特征初步融合，得到初步对话融合特征，并将对话状态特征与初步对话融合特征进行融合，得到目标对话融合特征，从业务知识向量库中检索目标对话融合特征对应的对话回复知识特征，基于目标对话融合特征及对话回复知识特征将对话问题文本进行对话回复生成。本申请实施例通过初步特征融合和目标特征融合，能够有效捕捉用户过往对话的语义特征，并基于目标对话融合特征及从业务知识向量中检索到的对话回复知识特征进行对话问题文本的对话回复生成，提高了对话回复的准确性。