摘要
本发明GNSS拒止环境下的无人机多模态视觉定位方法及系统,该方法包括:构建基于深度学习特征提取和匹配的视觉惯性里程计算法,计算无人机的相对定位,输出得到高频的6‑DoF位姿信息;采用基于Efficient‑LoFTR进行红外RGB图像多模态融合的景象匹配,并通过求解当前关键帧图片与匹配的卫星图像之间的相对位姿得到在世界系下的绝对定位;采用因子图优化的方式根据在世界系下的绝对定位的置信度与相对定位进行自适应权重的信息融合,输出一个高频且精度更高的6‑DoF位姿信息;基于高频且精度更高的6‑DoF位姿信息,在无人机回收后,对所有的航拍图像与卫星图像进行融合更新。该系统包括计算模块和融合更新模块。本发明能够提供更加精确且高频的位姿输出。
技术关键词
无人机
视觉定位方法
深度学习特征提取
特征点
图像多模态
视觉定位系统
描述符
关键帧
坐标系
航拍
检测解码器
因子
矩阵
滑动窗口
双三次插值
相机
投影残差
系统为您推荐了相关专利信息
损伤检测方法
图片
运动相机
巡检路径
骨架线提取算法
人机交互方法
交互设备
特征点
坐标系
激光投射设备
违章建筑检测方法
无人机航拍数据
时序
无人机场景
矫正
缺陷定位方法
神经网络结构
协方差矩阵
成像仪
声波