摘要
本发明提出一种基于自适应多模态融合的云游戏虚拟现实手势交互方法、设备及存储介质,包括以下步骤:S1,采集用户手部骨骼点数据,获取关键骨骼点的三维坐标,生成骨骼点特征向量;S2,采集手部深度图数据,提取手部区域的深度梯度特征,生成深度梯度特征向量;S3,采集手部运动时间序列数据,计算关键骨骼点的速度和加速度特征,生成时间序列特征向量;S4,对骨骼点特征、深度图特征和时间序列特征进行加权融合,生成融合特征向量;S5,结合融合特征向量与场景信息,推断用户交互意图并执行相应虚拟现实操作;通过多模态特征的加权融合,该方法显著提高了手势识别的准确性和抗干扰能力,适用于云游戏与虚拟现实交互场景。
技术关键词
手势交互方法
深度图数据
检测用户手势
虚拟现实交互
时间序列特征
游戏
意图
时间序列数据采集
加速度
执行虚拟现实
时间变化特征
坐标
物体
生成深度图
深度值
多模态特征
系统为您推荐了相关专利信息
故障检测模型
变速箱齿轮
时间序列特征
样本
高维特征向量
弹性伸缩方法
预测模型训练
时间序列数据库
负载预测方法
容器云平台
时间序列特征
交互特征
鲸鱼优化算法
时序特征
节点
视频传输控制方法
网络状态信息
节点
服务器
时间序列特征