摘要
本申请公开了一种医疗影像诊断报告生成方法、装置、设备、介质及产品。所述方法提取放射学图像的图像特征,编码医疗知识图谱作为先验知识帮助识别图像中的异常区域,并通过疾病关键词的建模考虑了一些疾病表现之间的相关性,然后利用图注意力机制整合提取到的图像特征和医疗知识图谱特征得到视觉融合特征;将视觉融合特征输入到预先训练的目标预测模型中最终得到预测的连续语义空间向量,进而通过离散词语与连续语义空间向量的映射得到生成的放射学医疗报告,能够准确对齐医疗图像特征和文本疾病关键字表示,进一步提高了诊断报告生成的准确性。
技术关键词
医疗知识图谱
影像诊断报告
融合特征
样本
注意力机制
计算机程序指令
图谱特征
生成方法
视觉
图像编码器
文本
词语
语义
关键词
计算机程序产品
随机噪声
疾病