摘要
本发明公开了一种基于多尺度特征分解与跨模态融合的SAR和光学图像配准方法,包括:获取合成孔径雷达和光学图像;将所述合成孔径雷达和光学图像以及待配准区域输入至训练好的多模态配准模型中,输出所述待配准区域在另外一个模态图像上对应的实际区域。多模态配准模型包括以下三个组成部分:多模态特征分解模块,用于从原始图像中分离出结构分量(MSF)与纹理分量(DTF);跨模态孪生编码器,用于实现特征语义对齐;动态卷积匹配模块用于实现高效匹配与坐标回归。
技术关键词
光学图像配准方法
合成孔径雷达
多模态特征
多尺度特征
跨模态
编码器
匹配模块
动态
纹理
注意力机制
坐标
语义
阶段
网络
色彩
数据
策略