一种多模态情感数字虚拟人实时交互方法及系统

本发明提供了一种多模态情感数字虚拟人实时交互方法及系统，方法包括：获取用户的多模态数据，所述多模态数据包括：语音数据、空间数据和手势数据；将所述语音数据转换为文本数据；将所述文本数据转换为文本流并利用HTTP协议与Socket协议进行传输；对所述文本流进行分句流式处理得到第一回复语音；对所述文本数据进行情感分析，得到情感特征；根据所述情感特征和所述第一回复语音生成第二回复语音；将所述第二回复语音实时传输至用户。涉及领域。本发明解决了现有技术中交互能力不足、交互效率低下和交互体验感不足的问题。