一种多模态数据样本的生成方法及电子设备

本申请公开了一种多模态数据样本的生成方法及电子设备，涉及数据处理技术领域。该方法包括：将原始多模态数据输入LLM，基于prompt提示词获取原始多模态数据的工具调用指令，依据该工具调用指令在该提示词中添加工具描述词，依据该工具调用指令，选择调用的模型，执行该任务信息对应的任务，得到数据处理结果，通过该工具描述词中的验证方式，以及该工具描述词中的工具调用响应格式，对该数据处理结果进行数据验证，若数据验证成功，对该数据处理结果和原始多模态数据进行强化学习，生成增强的多模态数据样本，该方法克服无引导的LLM指令生成混乱、不合理的缺陷，提升多模态数据处理的准确性和效率。