摘要
本发明公开了一种使用深度学习的高分辨率食管测压图像分析方法,根据临床医生针对食管测压图像序列所做出的初步的对食管动力异常的推断结果,获取自然语言查询文本,然后采用基于大语言模型的多模态诊断模型,获取融合了诊断请求与结构化分割提示的文本和用于定位食管测压图像中的食管动力异常区域的分割掩码,采用损失函数训练多模态诊断模型,获得预测的诊断推理流程及解释文本。本发明支持自然语言诊断请求与图文联合推理获得对应的解释性文本,帮助医生追踪诊断依据,增强系统的透明性与信赖度。所预测的解释文本中所描述的动力学异常的类别,涵盖CCv4.0标准的多个类别,具备高度可扩展性。
技术关键词
食管
图像分析方法
大语言模型
文本
自然语言
动力
视觉特征
贲门失弛缓症
多模态
序列
掩码方法
投影模块
解码器
疾病
痉挛
患者
图文
网络
系统为您推荐了相关专利信息
双向注意力
智能查询方法
神经网络模型
智能查询系统
命名实体识别
分子属性预测方法
属性预测模型
拓扑图
蒸馏
大语言模型