摘要
本发明提供了一种多源视频数据机器人技能学习方法及系统;通过示例视频搜集模块根据运动技能文本描述,自动搜集与该技能相关的示例视频并进行数据扩充,获取运动示例视频数据;构建虚拟机器人及虚拟摄像机并实例化,协同机器人控制策略与摄像机运镜策略并组合智能体,生成并录制机器人运动视频录制数据;通过运动技能视频打分模块,构建视频智能打分模型,生成对机器人运动视频录制数据的评分结果;通过智能体学习模块,设置神经网络打分模型的奖励反馈协同优化机器人控制策略和摄像机运镜策略,并更新到智能体中。
技术关键词
摄像机
策略网络模型
控制策略
视频
运动
数据
学习方法
机器人控制
关键词提取算法
学习系统
子系统
文本
机器人关节
大语言模型
标签
仿真环境
系统为您推荐了相关专利信息
移动机器人
排涝机器人
作业路径规划方法
障碍物
集群