基于多模态的医学算法模型构建系统

本发明公开了基于多模态的医学算法模型构建系统，包括：多模态数据采集与预处理模块，负责从多个数据源收集与感染性肺部疾病相关的数据，多模态特征提取模块：针对不同模态数据进行深度特征提取，多模态融合模块，采用自注意力机制将不同模态特征，包括影像、文本、结构化、时间序列以及大语言模型提取的关联特征整合，多任务学习与决策模块构建多任务学习框架，并行执行感染性肺部疾病风险预测和基于该预测的决策支持两项核心任务。该基于多模态的医学算法模型构建系统，通过整合门诊和急诊多时间点数据以及胸片影像学数据，提前预测感染性肺部疾病患者死亡率、ICU入院率及呼吸机需求，将关键决策节点前置。