基于扩散模型和高斯泼溅的三维场景生成方法及相关设备

本发明公开了一种基于扩散模型和高斯泼溅的三维场景生成方法及相关设备，属于计算机视觉领域。其中方法包括点云构建阶段和三维高斯优化阶段：在点云构建阶段，从输入的初始图像中提取初始点云，并通过Stable Diffusion图像修复模型、单目深度估计模型以及边界感知的深度对齐模块来扩展点云，以创建场景；在三维高斯优化阶段，根据获得的点云初始化三维高斯，利用三维高斯表示整个场景，采用多视角图像作为监督信号来优化三维高斯的参数，优化后获得可沉浸式浏览的三维场景。本发明无需任何三维数据进行训练就能够生成几何准确、外观自然的高保真三维场景，解决了对三维场景数据的依赖性问题，且对算力资源的需求小，降低了三维场景的制作成本。