摘要
基于分层多模态特征聚合的轴向Transformer的多源遥感图像分类方法,本发明涉及多源遥感图像分类方法。本发明目的是为了解决现有方法大多数联合分类往往局限于单一层次的特征级处理,而忽视了不同层次的多模态特征之间的深度融合,这种局限性导致这些方法的分类性能难以继续提升的问题。过程为:获取高光谱图像数据HSI;获取光探测和测距数据LiDAR;构建HMAT网络模型;HMAT网络模型包括通道调制模块、分层多模态特征聚合模块、加权局部特征提取模块、全局特征提取模块,以及局部‑全局特征融合分类模块;基于构建的HMAT网络模型对待测高光谱图像数据和光探测和测距数据对进行预测,获得分类结果。本发明用于多源遥感图像分类领域。
技术关键词
遥感图像分类方法
多模态特征
输出特征
全局特征融合
金字塔
全局特征提取
局部特征提取
代表
高光谱图像数据
模块
分层
注意力
多源遥感图像
网络
光探测
Softmax函数
序列
通道
位置编码信息
系统为您推荐了相关专利信息
智能机器人
多模态
特征提取器
识别方法
特征提取模块
医学图像分割模型
医学图像分割方法
输出特征
解码器
更新模型参数
语义场景补全系统
特征提取模块
多尺度
编码器
感知特征
安防检测方法
GrabCut算法
高斯混合模型
声光告警装置
红外相机