基于多模态二维影像的三维重建方法及系统

本发明公开了基于多模态二维影像的三维重建方法及系统，包括：获取CT设备的成像系统参数、原始CT三维数据，构建X射线投影多模态数据集；对数据集预处理，对于每个视角，通过双域协同采样策略计算像素采样点位置，共采样Np个像素位置，对应Np条采样射线；构建基于概率特征耦合器的分段自适应神经辐射场模型MNeRF；训练步骤S3构建的模型；利用训练好的模型对新的采样视角进行三维重建。本发明避免了随机均匀采样带来的上下文信息的缺失，同时分段自适应策略可以减少计算量，提高计算效率，可在稀疏视角约束下利用二维X射线图像进行场景的三维重建，使低剂量X射线下就能得到较充足的三维信息。