一种基于补丁匹配与轻量单目深度估计融合的实时动态三维重建方法和系统

本发明公开了一种基于补丁匹配与轻量单目深度估计融合的实时动态三维重建方法和系统，所述方法对输入的多视角图像对进行PatchMatch匹配，获取稀疏深度信息，并与单目深度估计结果融合；将融合后的深度图用于构建三维高斯点云，实现高质量的三维场景重建与新视角渲染。整个过程采用端到端可微分的训练框架，通过优化像素级的高斯参数回归网络和轻量深度估计模型，提升了3D高斯点云在动态场景下的重建精度与渲染效率。本发明能够在短时间内完成训练和深度推断，适用于实时或近实时的应用场景，可广泛应用于虚拟现实、增强现实、影视制作等领域，特别适用于对多视角动态场景下目标的高效三维重建与新视角合成。