基于虚拟数字人的人机交互方法及装置、设备、存储介质

本申请涉及人机交互领域，其具体地公开了一种基于虚拟数字人的人机交互方法及装置、设备、存储介质，其首先获取由摄像头采集的用户人机交互手势视频以及由穿戴设备采集的用户多个预定时间点的手势动作加速度值和角度值，然后利用深度学习技术，对二者进行特征提取和关联分析，最后通过分类器以得到分类结果，以生成用户肢体指令标签，以更准确地理解用户的手势意图，进而执行相应的操作或提供反馈，从而提高用户体验，使用户能够更自然、直观地与虚拟数字人进行交互。