摘要
本申请公开了一种基于虚拟现实的交互控制方法及系统,涉及监测分析技术领域,其包括多模态动作捕捉模块,用于捕捉目标用户对应的肢体空间坐标数据、关节旋转角度数据和肌肉激活信号;动作意图解析模块,包括时序卷积神经网络模型,时序卷积神经网络模型包括输入层和输出层,输入层用于接收多模态动作捕捉模块的骨骼关节点序列、角速度数据和肌电特征向量,输出层用于通过三层扩张因果卷积提取时空特征,连接分类器生成目标用户对应的初始动作数据;修正模块,用于构建人体关节角度约束库,对目标用户对应的初始动作数据进行判断,输出修正指令;环境适配模块,对虚拟场景中的环境进行调整。本申请具有提高交互效率的效果。
技术关键词
交互控制系统
时序卷积神经网络
动作捕捉模块
人体关节角度
关节点
Softmax分类器
注视点
线性共振致动器
交互控制方法
深度相机阵列
表面肌电传感器
音频单元
投影单元
数据
复杂度
多模态
识别置信度
场景
心率
误差向量
系统为您推荐了相关专利信息
三维网格模型
动作捕捉方法
相机
深度学习融合
时间同步
物联传感器
时序卷积神经网络
深度强化学习
时序特征
卷积神经网络提取
对象属性信息
环境状态信息
交互式控制方法
多模态交互
空间结构信息
汽车空调消音器
一体成型装置
冲压机构
进料限位器
工作台