摘要
本发明公开了一种基于多视角无标定的人体动作快速捕捉方法和系统,方法包括:使用基于神经网络并训练得到的人体三维重建模型,根据各不同视角的视频进行对应视角的人体三维重建,得到各相机坐标系下的数字三维人体动作;对各不同视角的相机预估一个初始外参,然后利用各相机的初始外参和对应相机坐标系下的数字三维人体动作,并基于物理几何一致性策略,对各相机外参进行迭代计算;利用迭代计算得到的相机外参,将对应相机坐标系下的数字三维人体动作转换到世界坐标系下,再通过多视角拟合得到最终的数字三维人体动作。本发明不需要繁重的标定工作,利用多视角视频帧实现自动标定,进而快速捕捉人体动作并完成三维重建。
技术关键词
三维人体动作
人体三维重建
关节点
捕捉方法
相机外参
坐标系
多人交互
多视角视频帧
特征提取网络
多层感知机
门控神经网络
数据项
空间金字塔池化
模型更新
三维重建模型