基于交叉注意力的院际协同跨模态医疗数据聚合系统

本申请提供一种基于交叉注意力的院际协同跨模态医疗数据聚合系统，涉及医疗系统领域，该院际协同跨模态医疗数据聚合系统包括主诉分析模块、请求发送模块、数据检索分析模块、交互映射模块和数据综合分析模块。本申请考虑历史检查数据的多尺度特征和模态间互补性，进行多模态特征提取得到多种特征表示并进行跨模态交互对齐和空间映射，进而通过K‑means聚类算法生成基准哈希码，从所述多个检查项目筛选出目标检查项目，本申请可靶向检索相关的目标多源数据并进行相应的分析生成诊断报告，能够减少无关数据得到干扰，此外，本申请提供的该系统以大语言模型LLM为中枢，调度各种工具处理数据，提升了流程的自动化和多模块并行处理，提高了数据的处理效率。