基于VR技术的沉浸式体感交互系统及方法

公开了一种基于VR技术的沉浸式体感交互系统及方法。其首先对由摄像头采集的用户交互肢体动作展示视频进行关键帧采样以得到用户交互肢体动作关键帧的时间序列，接着，通过基于神经网络的肢体动作特征提取器对所述用户交互肢体动作关键帧的时间序列进行特征提取并对得到的各个用户交互肢体动作特征图分别进行语义特征多尺度扫描以得到用户交互肢体动作语义特征向量的时间序列，然后，将所述用户交互肢体动作语义特征向量的时间序列输入结合节点显著性的节点间信息传递集成网络以得到用户交互肢体动作节点聚合语义表示向量，最后，基于所述用户交互肢体动作节点聚合语义表示向量，确定交互意图类型的识别结果，并返回匹配的交互结果。