一种稀疏视角语义先验的三维高斯溅射方法

本发明公开了一种稀疏视角语义先验的三维高斯溅射方法，包括以下步骤；步骤1：采集目标场景图像，构建真实图像集合作为数据集，并手动选择目标场景中感兴趣的物体进行语义三维重建，得到稀疏视角的初始语义图像；采集多视角图像，获取相机外参数和场景稀疏点云，选择若干视角输入到SAM2分割模型，得到具有语义图像的视角集合Is；步骤2：使用预训练的SAM2分割模型作为交互式图像序列分割模型，根据场景稀疏点云初始化三维高斯基元；步骤3：基于训练中的三维高斯溅射模型和交互式图像序列分割模型训练语义三维高斯溅射的参数，重建目标场景。本发明高效重建出高质量的语义模型。且可以在训练过程中通过交互式图形界面轻松修正重建结果。