一种多模态医学信息处理方法、设备及介质

本发明涉及智能医疗技术领域，具体涉及一种多模态医学信息处理方法、设备及介质，所述方法包括下列步骤：S1：构建医学信息处理模型，所述医学信息处理模型包括自适应调整编码器、多尺度自提示生成模块和特征金字塔网络；S2：采用交叉对比学习训练所述医学信息处理模型；S3：获取患者的医学信息，将医学信息输入训练后的医学信息处理模型，得到处理结果。本发明方法采用自适应调整编码器，在捕捉图像特征的同时，结合不同知识域的信息，增强了模型对多样化数据的适应性。