一种基于大模型和多模态的图文匹配分析方法、系统和装置

本发明为一种基于大模型和多模态的图文匹配分析方法、系统和装置，一所述方法包括如下步骤：1）图文解析：将图文解析出图像和文本；2）对于图像进行微调的多模态大模型处理，文字进行进行分词处理；3）构建平分权重；4）处理后的文字与构建平分权重进行构建Few‑shot提示词；5）将步骤4与步骤2中的文字和图片进行训练/微调作为大预言模型；6）相似度评分；7）对于评分进行解析。本发明通过引入多模态大模型与大语言模型的协同工作，综合利用其在语义理解、上下文分析和动态调整能力上的优势，建立了一种全面的图文匹配框架，可以提升匹配的准确性、灵活性和可解释性。