摘要
本发明提供了一种场景结构感知的实时三维场景视图合成方法、介质及设备;其中,方法为:利用SfM技术获得初始点云;使用混合预训练模型提供的场景几何先验信息对初始点云进行优化并生成锚点点云;将锚点点云中的低曲率值区域以及靠近场景表面的区域中锚点进行联合致密化;通过哈希网格对致密化后的锚点点云位置进行插值,获得哈希特征;同时使用点云相机相对位置通过视角感知网络,获得视角敏感特征;输入到多层感知机中生成高斯参数,并通过光栅化渲染,得到三维场景视图。该方法能够高效生成相机视野范围内三维空间中的几何结构和光照信息,从而实现自然、高质量的实时渲染。
技术关键词
场景结构
多层感知机
预训练模型
点云
视角
相机
网格
光栅化技术
执行存储器存储
参数
基元
锚点
姿态校正
处理器
符号
生成场景
机制
协方差矩阵
空间结构