摘要
本发明公开了一种遮挡感知的3DGS与神经SDF语义级混合重建方法,包括以下步骤:图像预处理:初始通过相机获得图像视频帧,从图像预处理开始,输入的图像处理步骤包括:语义分割、深度估计、法向估计以及内外参标定,从而生成相应的语义图、深度图、法向图和相机参数;3DGS与神经SDF对齐,在完成预处理后,将基于3DGS生成的几何信息与神经符号距离函数进行空间对齐,并结合区域稠密化和层次深度图修复;采用Marching Cubes算法完成最终的三维物体建模与快速重建。本发明提供了一种遮挡感知的3DGS与神经SDF语义级混合重建方法,能够将场景中的每个物体快速且高质量重建出来,同时支持下游的编辑任务、交互等应用。
技术关键词
深度图修复
语义标签
物体
三角形网格模型
语义分割信息
图像滤波方法
视角
光栅化技术
生成深度图
图像处理
视频帧
遮挡关系
标定相机
点云密度
场景
相机外参
系统为您推荐了相关专利信息
文本生成方法
文本编码器
空间结构信息
视角
投影器
语义分割信息
场景展示方法
场景展示装置
语义分割神经网络
立体图像