摘要
一种基于时空Swin Transformer融合的序列化图像分割方法,属于图像分割领域。针对于序列化图像,首先在预处理后的数据集上训练针对单张图像的空间维度的Swin Transformer模型。基于得到的多个单张图像的空间特征图,将其按照时间顺序排列,训练针对序列化图像的Swin Transformer模型。其次,设计融合时空特征图的序列化图像分割模型,使用SwinTransformer中的自注意力机制捕捉单张图像的空间特征和序列化图像的时间特征。最后,通过交叉注意力机制充分融合了空间特征提取模块和时间特征提取模块的优势,将两者在线性时间内高效融合,不仅弥补了时间维度的Vision Transformer中序列图像存在的空间特征的丢失情况,还能大大减小时间成本。
技术关键词
空间特征提取
注意力
特征提取模块
视觉
编码器
分支
图像分割方法
解码器
位置编码信息
多层感知机
时间序列特征
分辨率
线性
补丁
代表
融合时空特征
系统为您推荐了相关专利信息
移动式储能
充电机器人
机器人本体
大容量储能
新能源汽车
智能故障诊断方法
多层感知机
通道注意力机制
表达式
特征提取能力
语义变化检测方法
变化检测网络
多任务
解码器
编码器