一种基于知识检索多模态大模型的智能决策方法及装置

本发明公开了一种基于知识检索多模态大模型的智能决策方法及装置，属于人工智能和医学数据处理技术领域，该方法包括：获取患者的多模态诊疗数据，预处理并生成相应的特征向量；基于增强融合模型，对各模态的特征向量进行增强及跨模态特征向量融合，得到患者个性化融合特征向量；基于其在肿瘤治疗全流程电子记录数据库中进行知识检索，得到若干相似临床表现下的治疗方案，将检索得到的治疗方案与所述患者个性化融合特征向量一并输入大语言模型进行决策，得到患者的个性化治疗方案并评估其风险，辅助医生给出实际治疗方案；若患者的多模态诊疗数据随实际治疗进程被更新，则进行所述个性化治疗方案及其风险的更新，从而为医生提供实时动态辅助。