摘要
本申请提供了基于多模式AI智能交互的机械臂控制方法及装置,涉及机械臂控制技术领域,所述方法包括:采集多模态交互信息,进行融合处理;基于结构化交互指令数据序列进行用户任务意图解析,获得目标机械臂的结构化操作阶段序列;构建以主动物体为中心的交互基元,获得交互基元序列;利用目标机械臂根据交互基元序列将主动物体转移至被动物体上。通过本申请解决了现有技术中由于机械臂控制方式依赖单一输入方式或简单的信息叠加,在处理复杂任务时难以准确理解用户意图,导致机械臂操作精度受限的技术问题,通过对多模态交互信息融合处理,解析用户任务意图,将高层次的意图转化为低层次的、可执行的操作参数,提高了机械臂操作的精度和效率。
技术关键词
机械臂控制方法
序列
多模态交互
基元
关键词
物体
多模式
视觉特征信息
意图
机械臂控制装置
阶段
轨迹特征
指令
机械臂控制技术
数据
场景
麦克风阵列采集
节点
系统为您推荐了相关专利信息
矿用变压器
XGBoost模型
故障诊断方法
比值特征
特征选择机制
电力变压器电磁
损耗控制方法
智能电网环境
预测电力负荷
序列
智能感知网络
深度包检测技术
设备指纹识别
评分系统
时空注意力机制
ASIC芯片
芯片验证平台
测试接口
序列发生器
验证方法
信息抽取模型
证件
神经网络模型
多模态
大语言模型