一种基于并行多尺度级联Transformer的多模态图像匹配方法

本发明涉及多模态图像匹配技术领域，且公开了一种基于并行多尺度级联Transformer的多模态图像匹配方法。该方法利用特征提取器从输入的多模态图像对中提取粗级与细级特征；通过并行多尺度级联Transformer对粗级特征进行关联建模，并利用其中的通道权重自适应模块动态调整通道权重以优化特征表征；利用局部特征动态增强模块强化局部信息表达，提升特征的细节捕捉能力和多场景适应性；基于增强后的粗级特征构建得分矩阵，并通过相互最近邻准则实现粗匹配；通过引入细化层，在细级特征上逐步优化和调整粗匹配结果，最终实现高精度匹配；本发明在多模态图像匹配任务中表现出优异性能，能够有效应对复杂场景中的跨模态特性变化，适用于计算机视觉中的多种应用场景。