摘要
本发明公开了一种基于RGB图像增量式三维重建的物体抓取方法。包括以下步骤:S0、初始化机械臂运动;S1、提取RGB图像的关键帧;S2、基于所述关键帧对图像进行深度恢复得到初步恢复深度图和置信度图Ci;S3、对所述初步恢复深度图进行深度优化得到优化后的深度图S4、使用优化后的深度图对全局重建结果进行增量式更新,得到融合多视角信息的深度图S5、计算所述深度图的法向量得到法向图Ni;S6、对抓取位姿进行表示;S7、对抓取关键点进行估计;S8、对抓取接近方向和夹爪宽度进行估计;S9、机械臂根据当前运动状态和更新的目标位姿执行抓取动作。本发明在各类物体上具备通用的抓取能力,抓取成功率高,机械臂接近物体过程中同步进行重建和抓取位姿优化,不带来额外耗时。
技术关键词
物体抓取方法
深度图
关键帧
融合多视角信息
关键点
机械臂
接触点
深度恢复
相机
像素
重建三维场景
抓取动作
单目深度估计
图像匹配算法
三角化方法
因子
坐标
抓取物体
序列特征
系统为您推荐了相关专利信息
骨骼模型
动作分析方法
地面反作用力
鞋底
人体姿态识别
数字档案管理方法
数据处理模块
移动终端设备
项目
关键词
哈希方法
语义
专用特征
全局平均池化
手部空间位置
避让控制方法
动作识别模型
图像
实时位置
运动学特征