摘要
本发明提供一种实验任务执行方法及装置,该方法包括:基于视觉语言模型,对目标实验任务的任务信息进行划分,得到子任务序列,所述子任务序列由多个子任务按照执行顺序从前到后排列形成;从所述子任务序列中的第一个子任务开始,通过所述视觉语言模型,对当前子任务对应的文本信息和所述当前子任务执行前的实验图像进行处理,得到视觉提示图像,并通过视觉语言动作模型,基于所述文本信息、所述实验图像和所述视觉提示图像处理,引导机器人执行所述当前子任务,直至完成所述子任务序列中的最后一个子任务,确定完成所述目标实验任务。本发明有效提升实验任务的成功率、操作安全性与规程合规性,具有高度的通用性与安全性。
技术关键词
视觉
引导机器人
图像处理
文本
序列
非暂态计算机可读存储介质
语义
处理器
计算机程序产品
指令
执行装置
多视角
合规性
存储器
电子设备
模块
系统为您推荐了相关专利信息
分析方法
分析图像数据
指标
训练样本数据
直方图均衡化算法
快速生成方法
元素
关键词特征
序列
特征提取算法