摘要
本发明公开了一种基于单目深度估计和视觉SLAM的内窥镜位姿优化方法及装置,其中优化方法包括:S1:通过手眼标定法确定机械臂末端与内窥镜之间的坐标变换矩阵;S2:对内窥镜进行标定,获取内窥镜的内参和畸变参数;S3:获取训练数据集;S4:构建基于自注意力机制和稠密连接的单目深度估计网络,利用训练数据集对单目深度估计网络进行训练,得到目标物体的图像的深度估计;同时设定损失函数对单目深度估计网络的训练过程进行监督;S5:将深度估计引入基于直接法的RGB视觉里程计,对内窥镜的位姿进行估计;S6:基于扩展卡尔曼滤波方法融合机械臂末端的位姿信息和视觉里程计的位姿估计信息,对步骤S5估计出的内窥镜的位姿进行优化。
技术关键词
单目深度估计
内窥镜位姿
机械臂
视觉里程计
协方差矩阵
关键帧
畸变参数
计算机执行指令
注意力机制
手眼标定算法
图像
光度
编码器
扩展卡尔曼滤波
棋盘格标定板
滑动窗口
系统为您推荐了相关专利信息
陶瓷继电器
自动装配系统
极柱组件
装配台
传输机构
激光轮廓传感器
超声检测仪
构件无损检测
机械臂
步进电机
移动储能供电
球铰连接器
浮体
球接头
海上风力发电机