一种基于3d gaussian splatting生成的可实时驱动的3D人类化身方法及系统

本发明公开了一种基于3d gaussian splatting生成的可实时驱动的3D人类化身方法及系统，包括：数据采集模块、高斯初始化模块和训练渲染模块；数据采集模块基于单相机采集少量人体数据，从二维人体图像数据中预测基于smplx模型的人体姿态信息和基于Flame模型的表情信息，并制作标签；高斯初始化模块对任一帧标签中人体smplx模型网格自适应高斯初始化得到3D高斯椭球；训练渲染模块基于改进的3d gaussian splatting模型，训练步骤2初始化得到的3D高斯椭球，并渲染出可实时驱动的3D人类化身。本发明能够高度保持高斯点和人体smplx模型的拓扑一致性，降低伪影，提高高保真性。