摘要
本发明公开了一种基于高斯溅射的场景补全方法,涉及场景重建技术领域。获取摄像设备采集的目标场景的原始视频;将原始视频中每帧图像的像素点分别进行高斯溅射转换,得到高斯分布表示;高斯分布表示包括多个三维高斯点的空间位置和颜色信息;将所有三维高斯点的空间位置输入至改进的点云补全模型中,得到目标场景的完整高斯点云;改进的点云补全模型是将对比语言图像预训练CLIP模型和自蒸馏视觉变换器DINO模型提取的特征作为监督信息引入到点云补全网络PCN模型中构建的;根据高斯分布表示,对完整高斯点云进行颜色渲染,得到优化后的高斯点云分布。该方法能够生成较为逼真效果的场景。
技术关键词
图像补全技术
补全方法
像素点
摄像设备
场景重建技术
颜色
语义特征
视频
溅射技术
变换器
点云特征
协方差矩阵
本质
蒸馏
透明度
视觉
系统为您推荐了相关专利信息
误差补偿算法
拟合轮廓
激光传感器
焊缝实时跟踪
焊缝跟踪器