摘要
本申请涉及数字孪生技术领域,提供一种基于数字孪生的在线教学交互增强方法及系统,方法包括:通过多模态数据采集装置获取用户行为数据集合;对用户行为数据集合进行时空对齐处理,生成与用户行为同步的虚拟化身驱动数据集合,并将虚拟化身驱动数据集合输入虚拟教学场景的数字孪生模型中,驱动数字孪生模型中的虚拟化身执行与用户行为对应的实时动作;基于虚拟化身的实时动作与虚拟教学场景中教学元素之间的空间关系数据,生成交互指令集合,交互指令集合用于指示虚拟教学场景中教学元素的响应操作;根据交互指令集合调整虚拟教学场景的交互反馈配置信息,并基于调整后的交互反馈配置信息更新数字孪生模型的渲染输出数据。
技术关键词
数字孪生模型
教学场景
关键骨骼节点
分辨率
渲染图像数据
多模态数据采集
动作融合
序列
轨迹模型
元素
图像数据集合
压缩图像数据
坐标系
指令
参数
屏幕刷新率