摘要
本发明公开了一种基于光流的单目视频场景动态三维重建方法,涉及场景重建技术领域。计算单目视频中每帧图像中每一个像素的光流,确定图像的动态区域掩码;根据每一帧图像的动态区域掩码,确定多个时空一致的动态物体实例;将每一帧图像进行四维高斯溅射的转换,得到四维高斯分布表示;针对任一帧图像中的任一动态物体实例,获取不同图像帧中包含该动态物体实例的其他图像,并根据该图像和其他图像的高斯点云的坐标,生成该物体实例在该图像未观测到的视角点云;根据四维高斯分布表示中每一帧高斯点云的颜色信息,对生成视角点云的每一帧高斯点云进行颜色渲染,得到重建后的场景。该方法能够准确地实现场景重建。
技术关键词
动态物体
动态三维重建方法
深度图
图像生成模型
视角
像素
场景重建技术
点云
视频
单目深度估计
实例分割模型
坐标
颜色
跟踪方法
序列
系统为您推荐了相关专利信息
主体识别方法
数据
关键词
信息传播机制
卷积神经网络提取图像特征
轨迹重建方法
跟踪器
粒子滤波跟踪
集群
滑动窗口技术
虚拟现实影像数据
产品质量监控系统
图像采集器
产品位置信息
播放装置
图像生成模型
噪声预测器
文本编码器
样本
语义特征