摘要
本发明涉及医学影像处理技术领域,公开了一种多模态影像语义融合的病灶自动标注方法和系统,其技术方案要点是包括如下步骤:获取数据集;对多模态影像序列组合成伪彩色图像,并通过模糊聚类方法,得到异常信号像素集;根据异常信号像素集,定位异常信号位置,输出空间位置语义类;对异常信号像素集进行特征提出,输出影像特征语义类;并进行汇总,输出结构化语义单元;通过结构化语义单元,对NLP模型进行训练,得到多模态影像语义融合NLP模型;对待标注的多模态病灶影像,进行处理,并将结构化语义单元,输入至多模态影像语义融合NLP模型,得到概率诊断结果,并将概率诊断结果中可能性最大的病灶标签映射至影像空间,生成可视化病灶标注结果。
技术关键词
异常信号
语义
伪彩色图像
影像
模糊聚类方法
多模态
标注方法
序列
像素
输出模块
标注系统
数据处理模块
模型训练模块
标签
统计特征
纹理特征
图谱
矩阵
系统为您推荐了相关专利信息
诊断方法
多模态
多通道同步采样
分层特征提取
孤立森林算法