一种基于跨模态对齐与显著性语义区域的胸片报告生成方法及系统

本发明提供了一种基于跨模态对齐与显著性语义区域的胸片报告生成方法及系统，应用于数据处理技术领域。本申请基于用于识别医疗语义信息的显著性区域的网络模型对目标患者的胸部X光胸片图像信息以及对应的初始放射学报告文本信息进行处理，生成医疗语义信息的显著性区域和显著性图；基于由显著性区域引导的掩码图像建模模块对目标患者的胸部X光胸片图像、医疗语义信息的显著性区域图像进行处理，生成经过掩码图像重建后的图像块特征；基于由显著性图引导的语言生成模型对显著性图和经过掩码图像重建后的图像块特征进行处理，生成目标放射学报告信息；对目标放射学报告信息进行处理，生成胸片报告生成的评估结果。