摘要
本发明提供了一种基于数据扩增与语义图谱的SegTCLIP胶质瘤分割方法、系统及应用,涉及医学图像处理和图像分割技术领域,该方法包括:对预先收集的胶质瘤图像进行预处理,并对预处理后的胶质瘤图像进行缺失模态填补处理;通对填补处理后的胶质瘤图像及对应的文本数据进行特征提取并映射为嵌入向量,构建图文混合特征图;基于多模态像素特征图计算像素‑文本得分图,并将图文混合特征图和像素文本得分图输入到多模态解码网络进行特征解码,得到分割结果。本发明解决了胶质瘤图像模态缺失和胶质瘤图像与文本信息融合不足问题,同时提高了对复杂胶质瘤区域分割的准确性。
技术关键词
语义图谱
文本
分割方法
像素
图像嵌入
交叉注意力机制
图文
多模态图像配准
网络结构
模态特征
更新知识图谱
预训练模型
知识图谱技术
编码模块
解码网络
图像编码
系统为您推荐了相关专利信息
空间光调制器
数字微镜器件
相位恢复算法
紫外光源
衍射光学元件制作
巡检路径规划方法
桨叶
风机结构
像素点
无人机拍照