一种基于亚像素偏差估计的多模态图像匹配方法与系统

本发明公开了一种基于亚像素偏差估计的多模态图像匹配方法与系统，本发明方法包括将不同模态的两幅输入图像输入预先训练好的多模态图像匹配网络以获得两幅输入图像之间的偏移量，包括：分别对两幅输入图像提取多种尺度的特征张量、融合得到图像关键点的粗粒度描述符并进一步提取细粒度描述符；计算两幅输入图像的图像关键点的粗粒度描述符之间的相似度以生成粗粒度匹配点对；将两幅输入图像的粗粒度匹配点对结合细粒度描述符裁剪对应的特征点块、计算特征点块之间的关联热图并估计两幅输入图像之间的偏移量。本发明旨在针对不同传感器图像的模态变化以及几何失真的问题，实现亚像素级精度的匹配，提高图像匹配精度。