摘要
本发明公开了基于遥操与视觉特征的双臂机器人自主控制系统及方法,包括遥操作采集模块、多视角视觉感知模块、数据同步与示范采集模块、策略模型训练模块、自主策略执行模块、轨迹偏差检测与接管模块和混合控制接口模块。本发明通过遥操作完成人类示范,并采集图像、轨迹、夹爪、肌肉激活多模态信息,采用多视角时空对齐与跨视角注意力机制对感知特征进行融合,结合端到端大模型完成策略学习,在自主运行阶段,通过轨迹偏差检测与碰撞概率预测评估当前操作的风险,动态调节自主控制比例,必要时允许人工介入,提升整体系统的安全性与稳定性,实现了人机协同、自主与遥操作无缝切换的机器人控制方式,适用于复杂、高变环境下的物体操控任务。
技术关键词
自主控制系统
双臂机器人
视觉特征
多视角视觉
控制接口模块
模型训练模块
策略
特征融合方法
轨迹
多模态信息
模式
控制机器人动作
动态切换控制
深度强化学习模型
操作者
动态调节控制
动作捕捉服
系统为您推荐了相关专利信息
面部表情识别方法
面部关键点
编码特征
嵌入特征
视觉特征
残留检测方法
人机交互界面
监督学习算法
模型算法
注意力
建筑外观
反馈优化方法
视觉特征
情绪特征
模型库
视觉检测方法
多级特征
语义特征提取
模态特征
交互注意力