摘要
一种基于深度先验场景重建的航空发动机增强现实虚实融合方法,首先采集航空发动机环视RGB图和深度图数据,使用SFM算法计算相机帧位姿并得到稀疏点云,使用ICP算法与深度图转化的点云优化相机位姿,得到对齐后的先验稠密点云;再基于先验稠密点云和稀疏点云初始化高斯点,使用稠密点云的边界作为几何约束,限制3D高斯的随机生成;通过相邻多视角增强策略的三维重建,提高空间和视觉一致性,重建航空发动机模型;然后基于语义分割理解重建后的航空发动机模型,识别和标记核心部件,最后将重建的航空发动机通过增强现实进行虚实融合可视化,指导培训、装配、维护操作;本发明实现对航空发动机的快速高质量三维重建及增强现实虚实融合可视化。
技术关键词
航空发动机模型
稠密点云
相机
虚实融合方法
多视角
语义标签
重建场景
语义特征
生成稀疏点云
ICP算法
深度图数据
语义分割模型训练
深度学习语义分割
动态交互显示