摘要
本发明请求保护一种多头语义监督的脑肿瘤三维分割方法及系统。包括:1)一种新颖的多头语义监督的三维医学图像分割方法,该方法的网络模型由三维体图像编解码器、多分割头网络、提示向量生成网络(PVG模块)组成。2)为了引入CLIP提示驱动的分割方法,设计了一种基于CLIP模型文本特征‑图像特征匹配的提示向量生成网络。3)为了利用提示信息对三维重建特征图像进行语义监督分割,将不同肿瘤区域的提示信息与特征图像融合,提出了提示注意力融合模块(PAF模块:Prompt attention fusion),设计了多头语义监督驱动的多分割头网络。4)CLIP模型原本基于二维图像训练,难以直接应用于三维图像,本发明提出了一种三维视觉语言预训练方法,通过将二维的CLIP文本嵌入映射至三维空间,与三维的脑肿瘤特征进行对比学习,达到图文特征在联合空间的匹配一致性。5)为了保障模型的训练效果,提出了阶段式训练方法,一阶段训练进行三维视觉语言预训练,二阶段进行分割模型的训练。6)为了辅助医生在脑肿瘤病症诊断时更清晰地观察到多个目标肿瘤部分,本发明设计了一个操作简单,功能完善的脑肿瘤MRI三维分割原型系统。
技术关键词
三维分割方法
文本编码器
图像编码器
脑肿瘤分割
语义区域分割
网络
模块
三维图像特征
图像编解码器
通道注意力机制
三维图像数据
预训练方法
切片
系统为您推荐了相关专利信息
区域识别方法
生成提示词
图像编码器
微结构特征
区域识别装置
不确定性特征
脑肿瘤分割
特征提取模块
冠状
医学图像分析技术
数据模块
生成对抗模型
脱敏数据
网络拓扑优化
底座模块