摘要
本发明公开了一种基于高斯溅射的四维高斯模型生成方法、系统及设备,属于计算机视觉处理领域。本发明的方法首先使用预训练的文本到视频扩散模型生成与给定的文本提示一致的目标视频,然后由图像‑网格生成模型将目标视频逐帧转化为一个三维网格模型,对三维网格模型在主视角下的焦距范围内进行渲染,以计算渲染匹配焦距,采用高斯溅射方法训练初始时刻的静态高斯模型,而后训练形变网络,最终由训练好的静态高斯模型和形变网络生成给定时间戳下的四维高斯模型。本发明的方法可以在用明显短的时间内,生成生动的、纹理精细的、几何关系准确的且准确符合用户输入文字语义的高动态4D模型。
技术关键词
模型生成方法
图像
溅射方法
三维网格模型
模型训练模块
网络
视频
文本
计算机电子设备
模型生成系统
光栅化方法
随机噪声
相机
多视角
参数
存储计算机程序
变量
系统为您推荐了相关专利信息
自动修补系统
视频通讯
视频采集模块
图像识别模块
运动补偿模块
桥梁拉索护套
病害检测方法
语义分割模型
图像采集模块
构建卷积神经网络