一种基于AR虚拟视觉的岗位实训培养系统及培养方法

本发明涉及职业教育培训系统及方法技术领域，具体为一种基于AR虚拟视觉的岗位实训培养系统及培养方法，采用AR虚拟现实，创新性的采用了动态环境绑定技术，通过RGB‑D摄像头实时扫描实训场景，如实验室、工厂工位，采用的SLAM算法构建3D环境点云地图，虚拟设备自动对齐真实桌面坐标系，虚拟设备可“放置”在真实桌面上，受物理遮挡关系约束，如手部穿过虚拟器械时自动隐藏被遮挡部分，相较于传统的AR投影技术，更加真实，代入感和培训感更强，使得学员的培训进一步起效，适配岗位的周期更短；采用了多模态操作评价机制，操作轨迹与标准路径动态对比，实时生成偏差热力图；分解操作步骤为，准备→执行→校验三阶段，分别评分，进一步的实现培训评分。