基于多平面图像的视图虚拟视点合成方法及终端

本发明提供的一种基于多平面图像的视图虚拟视点合成方法及终端，包括：采集场景中多视点观测数据，利用预处理算法得到三维场景重建范围，确定MPI的深度预设值；将采集的多视点图像送入VPF特征编码器模块，提取每幅图像的多尺度特征图；使用NCV编码技术对视图间局部外观特征进行建模得到局部外观模型；将多尺度特征图和局部外观模型用于引导解码端建立每个输入视点的MPI；输出各MPI的颜色与透明度后，通过单应变换和Alpha渲染得到各MPI投影至目标视点的初步合成结果，并采用以视点距离为权重的加权融合方式得到最终的新视点图像。本发明能实现在少量视图可用条件下能够有效地避免视图过拟合问题，实现更好的几何结构重建能力。