一种利用视觉数据生成IMU数据的系统

本发明公开了一种利用视觉数据生成IMU数据的系统。该系统首先采用人体形态建模模块将RGB视频数据中的人体姿态转换为三维运动形态；之后，使用微分解析模块对3D关键点轨迹进行二阶中心差分计算加速度，同时对旋转矩阵进行一阶微分解析角速度，最终输出标准惯性测量单元(IMU)数据格式的三轴加速度和角速度数据。该系统生成的虚拟IMU数据可与硬件传感器数据进行多模态融合，在保持原有陀螺仪数据精度的同时，将有效的数据量进行扩展。通过该系统补偿数据后训练行为识别模型能有效的提高识别精度为可穿戴设备局限场景下的运动分析提供了可靠的数据增强方案。