摘要
本发明公开了一种基于Transformer的WSI图像分类方法、系统及相关设备;一种基于Transformer的WSI图像分类方法包括:使用OTSU算法对WSI图像进行组织提取;基于提取的前景组织获取最小矩形区域并进行patch切割,每个patch记录位置信息;将所有patch输入到预训练模型并输出特征序列,将WSI图像的对应患癌标签、位置信息和所有特征序列组成数据包;数据包输入到位置空间信息编码模块,基于不同大小的卷积核进行空间信息提取和聚合;经位置空间信息编码模块处理后的数据输入到Transformer模型中进行类别训练并进行预测。通过特征序列作为输入进行预测且利用位置空间信息编码模块充分利用WSI图像的空间信息,缩短预测时间并提高了预测准确率。
技术关键词
图像分类方法
编码模块
OTSU算法
图像分类系统
特征提取模块
序列
标签
输出特征
数字切片图像
组织
可读存储介质
预训练模型
展示模型
矩阵
数据
电子设备
处理器
矩形
程序