多模态融合食物识别大模型的构建及应用方法及系统

本申请实施例公开了一种多模态融合食物识别大模型的构建及应用方法及系统，方法包括：获取多模态训练数据集，采用多模态训练数据集中的多模态训练数据进行联合训练，获取多模态融合食物识别大模型；获取待识别食物的多模态数据；通过多模态融合食物识别大模型对多模态数据进行特征提取与融合，获取对应的融合特征信息；基于融合特征信息利用多模态融合食物识别大模型进行食物种类识别及营养成分分析，输出识别结果及营养建议。本申请实施例，利用大模型的强大学习和推理能力，基于待识别食物的多模态数据进行待识别食物的识别，对食物进行更准确、全面的识别，提高食物识别的准确率和可靠性。