摘要
本发明公开了一种基于稀疏视角的三维人体新视角图像合成方法及系统。该方法包括步骤:从N张不同视角的输入图像中分割出人体图像,基于人体图像重建三维人体模型;将三维人体模型作为几何约束确定辐射场中高斯基元的分布,得到每个高斯基元的位置参数;将N张不同视角的人体图像输入到图像编码器,分别提取每张人体图像的图像特征;基于每个高斯基元的投影坐标和可见性计算每个高斯基元的图像特征和颜色参数;将每个高斯基元的位置参数、图像特征和颜色参数输入到高斯基元解码器,获得辐射场中高斯基元的全部参数;从目标新视角对高斯基元构建的辐射场进行渲染,获得目标新视角图像。本发明可以在稀疏视角的条件下从任意新视角生成新视角图像。
技术关键词
三维人体模型
视角
基元解码器
深度神经网络
图像编码器
参数
颜色
图像重建
Sigmoid函数
坐标
样本
相机外参
射线
顶点
规模
对比度
系统为您推荐了相关专利信息
环境风险评估
风险评估方法
环境监测数据采集
知识图谱构建
油气田环境保护
交叉模块
编码特征
通用特征
深度神经网络模块
二阶特征
深度学习模型
预训练模型
平衡度
监控显示屏
显示设备
图像模板
地面全景影像
匹配定位方法
面向大场景
视角