基于多模态输入的客服系统及方法

本发明公开了一种基于多模态输入的客服系统及方法，包括知识库管理模块、预处理模块、对话任务模块、检测卡提取任务模块、判读任务模块；通过预处理模块实现支持多输入类型的处理以及多种任务之间的切换，融合了语音、纯文本、图像的多种提问方式，提升了业务场景的用户体验；通过对话任务模块提供多轮对话功能，实现了实时联想用户问题并返回联想问题供用户选择、确认，能够快速建立共同语言，生成标准问题，有效地避免了理解困难或表达模糊的问题，提升了问答效率，极大地提升了系统的可用性和可靠性；通过检测卡提取任务模块和判读任务模块，自动对图像进行检测及判读，并将判读结果整理后回复给用户，拓展了客服系统的功能，提升了用户体验。