一种基于提示词引导的多模态大模型车辆定损方法及系统

本申请提供了一种基于提示词引导的多模态大模型车辆定损方法及系统，该基于提示词引导的多模态大模型车辆定损方法包括以下步骤：对车辆损伤全景图进行特征提取，得到编码后的图像特征；基于所述编码后的图像特征和提示词，对车辆受损部位进行分割，得到车辆受损部位的分割图；基于所述提示词和所述车辆受损部位的分割图，利用多模态大模型进行多模态的图文对的信息交互，得到大模型视觉表示；基于所述大模型视觉表示，利用大语言模型进行车辆定损，得到受损车辆定损结果。在上述技术方案中，融合了语言和图片两种模态，基于多模态大模型和语言大模型，车辆定损的效果更加显著。