摘要
本发明涉及多模态图像配准技术领域,特别涉及一种基于双通道注意力网络的无人机多模态图像配准方法和系统,先将红外和可见光图像输入到特征点检测模块中提取两张图像的特征点,双通道注意力网络能够同时提取红外及可见光图像的特征及描述子,采用位置注意力结合通道注意力的方式,增强解码后的全局特征,使模型能够抵御复杂背景的干扰,提高配准精度;采用特征金字塔模块对图像进行多尺度特征配准,以提取不同尺度的目标特征,尤其是小目标,增加提取的特征点数,降低误匹配率;通过采用一种单应性自适应匹配策略,以增强特征点的复检率以及跨域的实用性,提高多模态图像的配准精度。
技术关键词
双通道注意力
注意力模型
特征点
可见光图像
描述符
空间变换网络
特征金字塔
配准误差
无人机
解码器
峰值信噪比
矩阵乘法运算
多模态图像配准
像素