摘要
本申请提供一种导览对话系统的答复方法、装置、设备及存储介质,导览对话系统的输入为多模态信息,包括导览场景下的文本、语音和图像信息,通过结合多种信息源,从而可以提供更全面、丰富的导览交互体验。根据多模态信息得到情感识别结果,利用情感识别结果和用户画像对答复信息进行情感优化,从而形成个性化情感响应,增强与用户之间的情感交流。将多模态信息转换为自然语言描述,并根据自然语言描述得到用户画像,根据用户画像和导览对话系统的上下文信息生成推荐信息,并从知识库中确定与推荐信息匹配的目标知识信息。通过结合用户画像和上下文信息的推荐机制,使得答复信息可以符合不同用户的兴趣、需求,从而提升用户的个性化体验。
技术关键词
对话系统
自然语言
多模态信息
画像
生成推荐信息
情感识别模型
答复方法
机器可读存储介质
场景
文本
图像
处理器
语音特征
注意力机制
信息更新
策略
指令
图谱
系统为您推荐了相关专利信息
评估模型构建方法
多模态信息
医学影像特征
编码器模块
跨模态数据
盲人眼镜
智能反馈系统
图像采集摄像头
神经网络对图像
自然语言