摘要
本发明公开了一种图像处理系统、方法及存储介质,该方法包括:获取历史患者耳部的MRI图像和对应的医疗报告;根据MRI图像编码生成左耳和右耳图像特征;根据左耳和右耳图像特征构建图像重建损失;根据MRI图像上提取的锚点特征构建图像对比学习损失;根据医疗报告确定特异性严重度评分,根据特异性严重度评分执行图像和从医疗报告中提取的文本特征之间的跨模态融合和对齐,其中,在执行跨模态对齐时构建得到跨模态对比损失;根据各损失构建目标函数,以便通过目标函数对诊断模型进行预训练;将当前患者耳部的MRI图像和对应的医疗报告输入预训练后的诊断模型中,以输出美尼尔病诊断结果。本发明通过图像处理可实现美尼尔病的准确高效诊断。
技术关键词
图像重建
跨模态
报告
注意力
图像块
图像处理系统
识别病变
文本
耳部
语义关联度
实体
线性分类器
感兴趣
样本
患者
编码器参数
锚点