一种基于虚拟数字人交互方法及系统

本发明涉及大数据服务技术领域，且公开了一种基于虚拟数字人交互方法及系统，包括文本识别模块、语音识别模块、决策模块、执行模块、人机交互模块、情感分析模块、多模态感知单元、视觉识别模块和视觉辅助模块；所述文本识别模块，用于用户通过文本输入与虚拟数字人进行交流，分析和理解用户的文本输入内容及文本情感；所述语音识别模块，用于用户通过语音输入与虚拟数字人进行交流，系统使用语音识别技术、声纹识别技术将用户的语音转换为计算机可读文本。本发明通过采集用户的面部表情特征，并将提取的面部表情特征反馈至决策层，这样决策层可以就用户语音、文本所识别的情绪内容进行补足，以此来提高人机交互模块情感输出时的真实性。