摘要
本发明公开了基于Transformer实例分割模型的训练方法,对真值掩码进行图形学变换得到增强真值掩码,在训练阶段基于增强真值掩码计算掩码注意力,在推理阶段基于预测掩码计算掩码注意力。在训练阶段执行多路径query特征传播,即第s解码阶段接受第s‑1解码阶段和第s‑2解码阶段输出的query特征作为本解码阶段的输入query特征。在推理阶段,Transformer实例分割模型仍保持执行单路径query特征传播,即第s解码阶段接受第s‑1解码阶段输出的query特征作为本解码阶段的输入query特征;本发明提出的“增强掩码模块EMM”和“查询多路径传播策略MPQ”应用于不同的Transformer的实例分割模型,均可以有效提升模型的实例分割精度。
技术关键词
查询特征
注意力
实例分割模型
匈牙利匹配算法
阶段
融合特征
多路径
策略
模块
码头
解码器
网络
多尺度
矩阵
生成解码
对象
尺寸
图像
系统为您推荐了相关专利信息
物理化学特征
特征信息处理
信息处理模块
序列
交叉验证方法
物联网终端
交叉注意力机制
终端异常检测方法
数字孪生
时序特征
多模态特征融合
语义特征
融合特征
分层特征
三维场景重建技术
视觉特征
定位方法
多尺度特征提取
查询优化器
注意力