摘要
本发明公开了一种基于可信度驱动的可扩展多视图3D高斯泼溅方法。本发明包含三个模块:基于多视图立体视觉索引的新视图初始化模块、感知约束深度推断模块和视角可信度高斯渲染模块;基于多视图立体视觉索引的新视图初始化模块得到初始低分辨率深度图及渲染图;感知约束深度推理模块通过对感知一致性的评估来获取可靠的深度估计值,从而有效应对源图像质量波动和场景几何复杂性带来的挑战;视角可信度高斯渲染模块在高斯推断过程中引入视角相关的可信度信息,以提升了渲染图像的保真度和方法的泛化能力。本发明在上述模块共同作用下,在新视角生成任务上表现优异,可广泛应用于虚拟现实、增强现实、影视特效制作等领域。
技术关键词
深度图
基元
立体视觉
多层感知机
多尺度特征
颜色
因子
神经网络模型
模块
视角
特征金字塔网络
输出特征
透明度
解码
索引
数据
采样点
图像
鲁棒性
相机