基于多模态的医疗大模型构建方法及系统

本发明提供了一种基于多模态的医疗大模型构建方法及系统，该方法包括：获取多份样本图像；对样本图像进行降噪，并根据降噪结果分别生成各个模态图像；定义基准坐标系，并将第二MRI图像中的心肌轮廓及厚度映射至基准坐标系，并将第二PET图像的代谢活性区域配准至基准坐标系，得到融合坐标系；在融合坐标系上，根据血管拓扑信息、心肌轮廓及厚度以及代谢活性区域生成多模态特征；将与每一样本图像对应的多模态特征进行标注，标注结果为心血管疾病风险等级，并将标注后的多模态特征输入至心血管疾病预测模型进行训练。本发明能够提高心血管风险的预测准确率和可靠性。