摘要
本发明涉及计算机图形处理技术领域,公开了一种语义引导的高斯点渲染方法、系统、设备及介质,包括:获取多视图图像,获取对应的2D图像特征,并与3D高斯点进行关联,对所述3D高斯点的语义特征进行蒸馏;提取蒸馏后的每个高斯点的语义特征和位置信息,生成综合外观特征,并将所述外观特征映射到材质属性;对扭曲图像与目标漫反射图像之间进行一致性评估,并同时约束所述3D高斯点的深度图和法线图的局部一致性,以通过一致性损失对所述3D高斯点进行优化和调整;结合可学习的环境贴图,计算最终像素颜色。本发明提高了渲染质量,通过语义特征蒸馏和隐式材质字典,更准确地表示物体的材质属性,有效解决反射表面的渲染问题。
技术关键词
语义特征
渲染方法
计算机可执行指令
深度图
图像
蒸馏
计算机图形处理技术
贴图
颜色
像素
延迟着色
卷积编码器
梯度下降算法
渲染系统
渲染技术
处理器
字典
计算机设备
系统为您推荐了相关专利信息
图像分类方法
图像分类模型
非暂态计算机可读存储介质
内存
图像分类系统
点检测方法
影像
特征点
RANSAC算法
误匹配点
偏振图像去雾方法
大气透射率图像
退化物理模型
光强度
引导滤波器
多相机协同
移动机器人
二维世界坐标系
优化准则
误差矩阵