摘要
本发明公开了一种稀疏视图合成新视角图像的合成方法,首先输入同一物体不同视角图像及相机位姿,获取预采样点五维向量,并进行采样,获取采样点的特征信息,通过小波分解提取预采样点的多层次特征,再通过频域特征编码网络解码,将多层次特征和预采样点的方向信息一起送入双层解码器模块得到体密度、颜色值与预测可见性,再输入到可微渲染模块生成渲染图像并生成预测可见性,将渲染图像与输入图像进行损失计算对整体网络进行优化,获取稀疏视图新视角合成网络模型;本发明完成了稀疏视图新视角合成任务,解决了神经辐射场在稀疏输入下高频信息丢失、局部过平滑的问题,在保持计算效率的同时提升稀疏视图新视角合成的精度。
技术关键词
编码特征
采样点
解码器
射线
编码模块
频域特征
网络解码
图像
注意力机制
表达式
神经网络结构
多层次特征
密度
颜色
Softmax函数
扫描体
系统为您推荐了相关专利信息
X射线发射管
检测机器人
X射线检测器
升降滑座
触控显示屏