摘要
本发明提供一种医学报告的生成方法、模型训练方法、系统、设备及介质。训练方法包括:获取综合医学影像集和对应的医学报告集及医学概念集;将综合医学影像集输入特征提取网络,提取空域视觉特征集和频域视觉特征集;将空域视觉特征集和空域平均视觉特征、频域视觉特征集和频域平均视觉特征输入增强融合网络,获得空频域结合特征集;将空频域结合特征集输入概念预测网络,生成预测医学概念集;将预测医学概念集和空频域结合特征集输入报告预测网络,生成预测医学报告集;根据预测医学报告集和医学报告集的差异度、预测医学概念集和医学概念集的差异度,更新医学报告生成模型的参数,得到训练好的医学报告生成模型。提升了生成的医学报告的质量。
技术关键词
视觉特征
生成模型训练方法
概念
特征提取网络
生成方法
生成医学报告
模型训练系统
参数更新模块
多头注意力机制
矩阵
电子设备
特征提取模块
数据获取模块
计算机
处理器