摘要
本发明涉及虚拟现实技术领域,公开了一种虚拟现实环境下的信息交互方法、装置、设备及介质,该方法包括:当目标用户在虚拟环境下发起信息交互时,获取目标用户的信息交互对象和面部表情数据以及语音数据;若信息交互对象为虚拟客服,基于深度学习对面部表情数据和语音数据进行分析,确定目标用户的情绪信息;根据语音数据对应的文本信息和情绪信息确定用户需求,并结合预设知识图谱确定反馈信息;通过虚拟客服向目标用户语音输出反馈信息,本发明通过用户在虚拟现实环境下和虚拟客服交互时,结合情绪信息确定用户需求,从而保证反馈信息的有效性,提高信息交互效果。
技术关键词
虚拟现实环境
信息交互方法
语音
面部
文本
客服
多模态特征融合
对象
计算机
信息交互装置
融合特征
深度学习网络
虚拟现实技术
可读存储介质
表情特征
图谱
数据获取模块
生成方式