基于AI数字人互动式博物馆讲解服务的智能问答系统及方法

本申请公开了一种基于AI数字人互动式博物馆讲解服务的智能问答系统及方法，该系统包括：多模态输入接收单元、用户意图识别模块、垂直领域智能问答单元、数字人答案视频生成模块和人机交互界面模块；多模态输入接收单元，用于采集用户通过语音、文本或手语动作的输入路径所传达的输入信息，并将所采集的用户输入信息发送至用户意图识别模块；用户意图识别单元，通过语音识别、自然语言处理和手语动作识别技术对用户输入信息进行解析和处理，提取出用户意图的文本描述；垂直领域智能问答单元，基于输入的表达用户意图的文本描述，搜索与该文本描述相关的文本回答，对文本回答提炼，获取用户查询相关的文本答案；数字人答案视频生成模块，将文本答案转换为语音和手语动作，通过虚拟数字人的多模态行为实时生成视频。