基于ViT精细语义分割优化的航天器神经隐式表面三维重建方法

本发明提出了一种基于ViT精细语义分割优化的航天器神经隐式表面三维重建方法，对航天器进行围绕观测，采集到一系列包含目标信息的图像，并估计拍摄照片的相机的相对位姿信息。在此基础上，利用ViT架构去获取多视图的语义掩码，再利用神经隐式符号距离场建模方法，对目标进行带有语义的三维重建。整个方法包含以下主要模块：1）模拟环境图像采集模块，2）语义掩码提取模块，3）基于神经辐射场（NeRF）与符号距离场表示（SDF）的三维重建模块和4）新视角掩码渲染与目标位姿估计模块。相对于传统的三维重建方案，根据本发明方案，能够获取新视角的视图掩码并根据语义信息提供渲染位姿。