融合疾病感知对比和跨模态对齐的放射学报告生成方法

本发明涉及放射学报告领域，公开了融合疾病感知对比和跨模态对齐的放射学报告生成方法，包括以下步骤：通过视觉编码器和文本编码器分别提取医学图像的视觉特征和放射学报告的文本特征；利用疾病感知对比学习模块DACL将视觉特征与文本特征映射至统一语义空间；通过跨模态记忆对齐模块CMA利用动态更新的记忆矩阵进行自适应特征匹配；采用三阶段训练策略优化模型，包括预训练、强化学习微调及知识蒸馏。通过文本特征动态更新增量知识，专注于跨模态特征对齐任务，避免与特征表示耦合，提升对齐效率，三阶段训练策略，若学生模型性能更优则迁移权重，进一步增强模型的临床准确性与泛化能力。