摘要
本发明提供一种多模态医学检查报告自动生成方法以及系统,其中,上述方法包括对预处理的检查影像进行病灶识别和分割,得到标注异常区域分割图;调用预训练的深度学习模型基于所述标注异常区域分割图进行识别,得到初步文本提示,其中,所述初步文本提示包括所述标注异常区域分割图的病灶位置、病灶形态特征、病灶病变类型以及病灶临床意义;调用预训练的大语言模型将所述初步文本提示,生成医学检查报告,其中,所述医学检查报告包括病灶描述、诊断意见以及治疗建议。通过本发明提升了医学检查报告生成的效率和准确性。
技术关键词
自动生成方法
深度学习模型
自动生成系统
多模态
影像
文本
医学知识库
非暂态计算机可读存储介质
计算机断层扫描
图像处理模块
处理器
计算机程序产品
形态
存储器
电子设备
成像
系统为您推荐了相关专利信息
资源推荐方法
跨模态融合特征
注意力
知识图谱补全算法
点击率预测
来源鉴别方法
音频特征
视频
门控循环单元
时间门控
多模态
设备组
数据
智能家居设备
多设备协同工作
影像诊断报告
文本生成器
生成方法
全局视觉特征
区域位置信息