摘要
本发明公开了一种基于边界信息的光声多模态分割方法、系统及介质,涉及光声成像技术领域,将光声图像输入到已训练后的光声多模态分割网络中,得到分割结果;光声多模态分割网络的构建过程如下:构建CLIP信号编码网络和CLIP图像编码网络,以“光声信号‑边界信号”数据对微调CLIP信号编码网络中的文本编码器,以“光声图像‑边界图像”数据对微调CLIP图像编码网络中的图像编码器;设置单模态的图像分割网络,以“光声图像‑边界图像”数据对预训练图像分割网络;将微调后的图像编码器和文本编码器以及预训练后图像分割网络中的解码器拼接作为光声多模态分割网络;该分割方法实现了高精度光声图像分割。
技术关键词
图像分割网络
文本编码器
图像编码器
分割方法
计算机可读储存介质
信号编码
边界特征
分类程序
光声成像技术
权重机制
像素
编解码器
计算机系统
系统为您推荐了相关专利信息
图像分割模型
原始图像数据
图像编码器
图像分割方法
解码器
实例分割
分割方法
路面缺陷
无人机自动巡航
卷积神经网络结构
变化检测方法
深度编码器
图像编码器
特征提取器
深度图