摘要
本发明公开了一种基于多模态学习优化的影像报告生成方法、系统及设备,方法包括:影像检索模块,用于对输入医学影像进行影像特征提取,获取相似的医学影像及报告;模仿生成模块,用于利用医学影像及报告,指导影像报告生成模型生成初始草稿报告;个性化诊断模块,用于根据医生的历史报告偏好或患者的历史医学数据对报告生成模型进行个性化调整;强化学习优化模块,用于基于强化学习的报告优化策略,动态调整文本生成方式,并结合医生评分、自动化评估以及临床反馈优化影像报告生成模型;迭代精炼模块,用于使用初始草稿报告作为查询,进行文本检索,获取与初始草稿报告在语义上相似的文本片段,并进行神经符号推理优化,生成最终报告。
技术关键词
影像报告生成方法
影像检索模块
医学知识库
多模态注意力
生成方式
文本
语义
标注功能
报告生成系统
诊断模块
动态
机制
热力图
生成报告
残差网络
系统为您推荐了相关专利信息
移动机器人
多机器人协作
机器人协作搬运
多边形
进化算法
医学知识图谱
参数
管理方法
子系统
条件生成对抗