摘要
本申请公开了一种基于三维高斯溅射的大场景三维重建方法,涉及计算机图形:采集大场景的多视角图像集;根据多视角图像集,获取场景稀疏点云;利用预训练的深度预测网络对多视角图像进行单目深度估计,得到单目深度估计先验;利用场景稀疏点云和单目深度估计先验,对场景进行全局训练,得到初始三维高斯模型,对初始三维高斯模型进行空间网格划分,得到多个具有轴对齐包围盒的场景分块;设置每个场景分块的图像视角数据;利用并行GPU对多个场景分块内的高斯椭球进行深度监督训练;合并训练后的场景分块,得到最终的三维高斯模型;针对大场景三维渲染中仅依赖多视角图像的颜色信息导致几何结构重建精度低,本申请提高了大场景渲染重建精度。
技术关键词
场景三维重建方法
单目深度估计
分块
相机位姿估计
深度预测网络
多视角
透明度
点云
特征点
协方差矩阵
图像块
像素颜色值
成像
线性回归模型
层级