基于元学习微调的多模态大模型机器人控制方法

本发明涉及一种基于元学习微调的多模态大模型机器人控制方法，包括：针对OpenVLA模型进行元学习预训练，得到预训练好的VLA模型；之后进行任务特定微调，得到微调后的VLA模型；将当前视觉数据、语言提示词、机器人传感器数据以及任务目标数据图输入微调后的VLA模型，输出得到决策控制指令，用于相应控制机器人的工作状态。与现有技术相比，本发明通过在多样化的任务上进行元学习预训练，提取通用特征和策略，以提升模型的泛化能力；此外，在具体任务中，通过少量新样本进行快速微调，使模型能够在短时间内适应新的任务要求；并结合视觉、文字提示词和机器人控制的多模态信息，以提高模型的感知和决策能力，有效提升机器人在复杂环境中的适应性和操作效率。