摘要
本发明属于医学图像识别技术领域,具体公开了一种基于心脏多模态影像的心肌梗死并发症识别方法,首先获取多模态医学图像数据和对应的诊断报告文本数据;再进行心肌梗死并发症识别模型的构建;进而采用分离训练的思想,将整体网络分为特征提取阶段和图像文本特征匹配阶段,通过L1损失对特征提取阶段网络进行反向传播,优化特征提取网络的权重参数;通过对比损失对图像文本匹配阶段网络进行反向传播,优化图像和文本编码器的参数;最后采集病人心脏的医学影像,输入至训练好的心肌梗死并发症识别模型,生成心脏病症并发症的文字诊断报告。从而实现心肌梗死并发症的早期自动诊断。
技术关键词
多模态医学图像
识别方法
多模态特征融合
特征提取模块
文本编码器
影像
心脏医学图像
特征提取网络
报告
原型
文本特征向量
阶段
医学图像识别技术
识别系统
融合特征
系统为您推荐了相关专利信息
振动特征
判断系统
异常判断方法
Canny算法
在线
融合方法
微波
配准误差
注意力机制
生成对抗网络
医学图像融合方法
图像融合系统
多分支
注意力机制
输出特征
深度信息估计方法
加权特征
图像
倒置显微镜
特征提取模块