摘要
本发明提供一种基于VR技术的中小学多人互动式教学方法及系统,涉及虚拟现实技术领域,包括基于预先获取的教具模型数据,通过深度学习生成模型,确定子部件,结合教具生成引擎,构建虚拟教具;通过结构光深度摄像头,获取彩色图像和深度图像,获取二维像素坐标,结合深度信息,生成学员肢体运动的三维骨骼曲线,得到光学动作捕捉结果,基于三维骨骼曲线,经过惯性漂移校准,获得惯性动作捕捉结果,重建学员的肢体运动三维轨迹;基于学员的肢体运动三维轨迹,通过碰撞检测算法,通过求解动力学方程,生成力反馈信号;将虚拟化模型渲染到虚拟教学场景中,实时同步肢体运动三维轨迹和力反馈信号,生成虚拟教具的多人协同互动过程。
技术关键词
光学动作捕捉
教具模型
惯性动作捕捉
关键点
彩色图像
分布特征
碰撞检测算法
三角面片网格模型
结构光
身体
力反馈
节点
协方差矩阵
条件生成对抗网络
运动
编码器模块
坐标
教学场景
系统为您推荐了相关专利信息
近眼显示设备
虚拟交互对象
关键点
方程
手势交互技术
海底管道敷设施工
栅格
筛选方法
边缘检测算法
边缘轮廓
蔬果采摘机器人
重构模型
标签
建模方法
三维点云模型