摘要
本发明公开了精密电子产品AR装配引导的跟踪定位方法,将6D位姿估计任务分解为:位姿初始化和位姿迭代优化。首先将位姿初始化转化为视角分类任务,使用Open3D将电子机箱三维模型与VOC2012数据集合成用于生成视角分类的数据集。然后基于目标检测框架YOLOv8对视角进行分类,获取与当前视角接近的标签视角。将YOLOv8分类得到的标签视角转换为对应3D旋转,结合相机内参和检测框的中心坐标计算出3D平移。获取目标物体的粗略初始6D位姿后,将当前观察到的图像和模型在当前位姿下的渲染图像拼接作为输入,使用基于预训练简单光流网络的位姿优化器预测它们之间的相对位姿变换来求解更精准的6D位姿,并且可以在多次迭代中取得更高的精度,最终实现网络模型对电子装备的跟踪和定位。
技术关键词
跟踪定位方法
精密电子产品
视角
三维模型
电子装备
相机
支路
物体
粗略
顶点
解码器架构
编码器
电子机箱
数据
分类网络
图像拼接
坐标系
系统为您推荐了相关专利信息
网络训练方法
二维图像特征
点云特征
激光雷达点云数据
文本编码器
性检查工具
性检查方法
核电厂设备
三维模型
分类规则
全过程施工方法
曲面幕墙
施工质量标准
建筑主体结构
异常状态
实体对齐方法
多视角特征
混合专家网络
三元组
深度学习模型