摘要
本发明提供了一种面向三维高斯编辑方法,包括:S1.源三维高斯渲染、深度估计及反演,得到对应不同视角的源二维图像和深度图,并将源二维图像反演回噪声;S2.源二维图像语义分割,得到对应的掩码并将图像分为编辑区域与未编辑区域;S3.频率‑空间一致性增强,对噪声的一致性增强;S4.语义和参考视角的一致性对齐:将一致性增强后的噪声、编辑文本指示以及深度图输入到预训练的二维扩散模型进行二维编辑,对当前编辑视角进行一致性对齐并与未编辑区域进行结合得到二维编辑结果;S5.三维高斯优化:将二维编辑结果来对源三维高斯进行优化,得到最终编辑后的三维高斯。本发明方法用二维编辑结果来优化三维编辑,以保证三维编辑结果的多视角一致性。
技术关键词
编辑方法
视角
图像语义分割
深度图
噪声
语义分割模型
双边滤波器
文本
分支
高通滤波器
低通滤波器
编码
注意力机制
频率
像素
系统为您推荐了相关专利信息
组合预测模型
元胞自动机模型
总量
卡尔曼滤波组合
数据驱动模型
三维重建方法
三维模型
数字正射影像
三维网格模型
辅助定位数据
有机显示器
数据处理方法
温湿度参数
残差矩阵
柔性形变传感器
辨识机构
传输机构
辨识系统
同步操作机构
前馈神经网络
知识蒸馏方法
分类器模型
生成对抗网络
分类网络
客户端