摘要
本发明属于灵巧手控制技术领域,公开了一种基于RGB图像的人形机器人灵巧手控制方法、系统及介质,所述方法包括:获取人体手部的连续动作RGB图像帧;对人体手部的连续动作RGB图像帧进行裁剪与姿态检测处理,得到若干手部关键点;在预构建的3D手部模型中,基于若干手部关键点计算3D手部模型的预设数量的关节点角度;将关节点角度输入至预先构建的灵巧手的关节角度映射模型中,计算出灵巧手的关节角度,将灵巧手的关节角度发送至人形机器人的控制器,以使人形机器人的控制器驱动人形机器人执行对应的动作。本发明具有精度高、实时性强以及适应性强等优点。
技术关键词
人形机器人
手部关键点
关节点
人体手部
滑动均值滤波
人体手指关节
灵巧手控制系统
拉格朗日插值法
图像处理模块
图像获取模块
处理器
样本
控制器
数据
可读存储介质
存储器
系统为您推荐了相关专利信息
手部关键点
产线
YOLO算法
姿态估计
规范检测方法
仿生机械臂
牵引绳
人形机器人
机器人主体
电机座
网络威胁分析方法
资产
路径查找算法
链路
社区检测算法