一种结合MANO模型和3DGS的手部新视角图像生成方法

本发明涉及一种根据手部多视角图像生成新视角图像的方法，属于计算机视觉领域，其目的是解决现有手部新视角图像生成速度慢且图像质量不高的问题。在已知手部多视角图像的情况下，本发明方法首先利用卷积神经网络从手部图像获取手部形状参数和姿态参数，接着利用这些参数按照MANO模型计算得到手部三维网格，通过三维网格指引手部点云初始化，然后采用3DGS方法根据初始化点云以及给定的手部多视角图像，建立手部3DGS模型，最后根据手部3DGS模型渲染生成任意新视角下的高质量手部图像。本发明方法不仅通过三维网格指引的点云初始化使生成的手部图像更接近真实情况，还利用3DGS的并行渲染技术实现了新视角图像的快速生成。