摘要
本发明公开一种基于模仿学习的机械臂控制方法及系统,属于智能机器人与自动化控制领域。数据收集层基于VR平台设计数据收集方法,负责收集示教数据制作复杂场景数据集,并进行坐标转换解算为机械臂各关节的角度信息,实现VR遥操作示教及示教数据收集,将其传输至多模态图像融合的ACT算法层;多模态图像融合的ACT算法层对复杂光照场景数据进行特征提取与融合去噪,然后将红外和可见光信息融合互补的特征结合ACT算法获得预测动作参数,并通过运动控制策略转化为对应动作规划,驱动机械臂自主完成任务。本发明解决了主流模仿学习算法在复杂光照环境下性能受限,机械臂动作容易偏转等问题,显著提高机械臂在光照复杂条件下感知性能和适应复杂场景的能力。
技术关键词
机械臂控制方法
坐标系
融合特征
梯度纹理特征
机械臂控制系统
驱动机械臂
VR交互
可见光图像
示教数据
算法模块
控制策略
机械臂关节
注意力机制
序列
系统为您推荐了相关专利信息
传感器融合
智能巡检方法
机器人巡检
智能巡检系统
多传感器采集
Harris角点检测
融合特征
特征点集合
三维表面模型
生成多尺度
双目视觉系统
微型相机
双臂机器人
光纤
装配系统