一种基于大模型动作解析和自动编程的3C装配免编程方法

本发明提出一种基于大模型动作解析和自动编程的3C装配免编程方法，包括，构建智能化装配产线，基于智能化装配产线，构建多模态虚拟环境；在多模态虚拟环境中，建立包含视觉、触觉、深度的感知模型，实现对多模态示教视频数据的采集；对多模态示教视频数据进行动作解析，得到动作序列集合；构建基础任务学习模型，将动作序列集合输入基础任务学习模型进行训练，得到任务学习模型；将任务学习模型的输入和输出的结果定义为执行序列，根据执行序列实现所学技能策略从多模态虚拟环境到真实环境的迁移。通过本发明提出的方法，智能体在3C制造领域能够更好地理解和适应不同场景、任务，提高了系统的智能水平、技能迁移和泛化能力。