基于模态注入与多模态融合的罕见病知识图谱构建方法

本发明涉及医学人工智能与知识图谱构建技术领域，特别涉及基于模态注入与多模态融合的罕见病知识图谱构建方法。包括以下步骤：S1、采集包括文本、影像及基因的多模态医疗信息；S2、标准化处理，构建三层元数据结构；S3、补全缺失模态数据，对模态数据分别进行特征提取与统一维度转换，实现共享语义空间中的表示对齐；S4、多级语义融合，得到统一融合语义向量；S5、构建包括本体层和实例层的双层结构体系罕见病知识图谱。本发明选取文本、影像及基因的多模态医疗信息构建罕见病知识图谱，提高其知识图谱的应用范围、覆盖性与准确性，能够解决罕见病临床诊疗时稀少案例的对应性适配，具有较强的识别能力。