基于多模态感知与动态评估的沉浸式虚拟教学系统

本发明涉及虚拟现实教育技术领域，尤其涉及一种基于多模态感知与动态评估的沉浸式虚拟教学系统，包括：数据采集模块、数据处理模块、渲染模块和评估模块；数据采集模块用于采集用户的外貌数据和语音数据；数据处理模块用于实时处理数据采集模块采集到的外貌数据和语音数据并将处理后的外貌数据和语音数据与SMPL‑X模型融合形成动态数字人；渲染模块用于虚拟教学场景的显示以及将动态数字人渲染进虚拟教学场景中；评估模块用于评估用户在虚拟教学场景中的学习专注度与实验操作准确度，本发明提供了一种支持无标记全息捕捉、多模态数据融合映射、多人低延迟协作及动态学习评估的沉浸式虚拟教学系统。