摘要
本发明提供了一种用于机器人的任务处理方法、装置、电子设备及机器人,涉及人工智能、可信人工智能、智能机器人、智能装备等技术领域。该方法包括:响应于接收到用户输入的任务信息,获取任务信息指示的被操作对象的第一控制面板图像和多模态操作信息,多模态操作信息包括文本操作信息;调用大语言模型,根据任务信息和文本操作信息,生成操作序列;根据操作序列、第一控制面板图像和多模态操作信息,生成指令序列;根据指令序列控制机器人操作每个操作区域,以处理与任务信息对应的任务。本发明能够解决机器人难以准确地执行任务导致使用体验受限的技术问题,保证机器人能够准确操控操作区域,实现提高使用体验的技术效果。
技术关键词
控制面板
二维位置信息
生成指令序列
多模态
机器人
大语言模型
文本
图像
三维位置信息
字段
样本
对象
坐标系
处理器
关系
标识
电子设备
智能装备
系统为您推荐了相关专利信息
支撑臂组件
定位组件
导轨滑块
拼焊工装
升降销组件
水下场景
激光雷达
语义标签
传感器融合
建模方法
面部
基础
工作状态数据
员工状态监测系统
二值化图像