一种基于多模态大模型的实时内镜影像分析方法及系统

本发明涉及一种基于多模态大模型的实时内镜影像分析方法及系统，该方法包括以下步骤：实时采集内镜影像数据，输入多模态大模型中进行处理，获得病变分割图，其中所述多模态大模型中包含专家模型，所述多模态大模型的执行步骤包括：基于所述内镜影像数据，进行初步判读，得出内镜影像类型和病变概率；基于所述内镜影像类型和病变概率，采用专家模型进行深度处理，获得初始病变分割图；将所述初始病变分割图进行汇总，并进行综合推理，获得最终的病变分割图。与现有技术相比，本发明具有融合多任务、为医生诊断提供更准确的依据等优点。