摘要
本发明提出一种大模型驱动的云边协同具身学习方法,包括:在云端利用小样本测试集对感知模型的性能进行量化评估,以确定当前感知模型智能水平,所述小样本测试集通过第一智能体在未知环境中采集到的测试样本构建得到,所述测试样本由观测图像数据及对应的语义真值表征;在云端利用大模型根据量化评估结果生成用于指导多模态训练数据采集的环境选择策略与探索策略;布设在边缘端的第二智能体在云端策略指导下采集多模态训练数据;将所述第二智能体采集的多模态训练数据上传至云端,在云端基于该多模态数据优化所述感知模型。本发明通过云端和边缘端的协同工作,可在有限的时间内显著提升机器人对环境的感知和理解能力。
技术关键词
学习方法
语义
云端
策略
物体
样本
多模态
机器人对环境
数据采集模块
坐标
图像
计算机
可读存储介质
规划算法
学习装置
索引
像素
短路
系统为您推荐了相关专利信息
三维模型
多模态数据融合
控制指令生成单元
环境数据采集单元
语义
电力采集
策略控制系统
实时数据
数据转换模块
云服务器
手持终端
盾构隧道施工
通信链路
监管方法
盾构掘进参数
钻井参数
深度强化学习
决策
整体框架结构
钻井优化技术