摘要
本发明涉及医学影像生成报告领域,更具体地,涉及一种基于深度神经网络的多视图医学影像报告自动生成模型及方法,本发明通过初级视觉编码器模块提取各个视图影像的初级视觉特征,再由融合模块融合初级视觉特征,接着将融合后的视觉特征输入到高级视觉编码器,得到高级视觉特征,最后解码器模块根据高级视觉特征生成多视图医学影像报告,本发明能够处理来自不同视图的影像数据,从而生成更加全面的医学影像报告。同时,利用反向交叉注意力机制,选择性地融合来自不同视图中的互补信息,生成更加准确的医学影像报告。
技术关键词
视觉特征
报告自动生成方法
深度神经网络模型
解码器
医学影像数据
模块
交叉注意力机制
字符
编码
多层感知机
生成报告
图像缩放
误差
优化器