摘要
本申请涉及图像处理领域,公开了基于深度学习的遥感图文检索方法、系统、设备及介质,所述方法包括,输入待检索的遥感图像或遥感文本数据,通过跨模态多尺度提取网络同时对图像的多尺度特征和文本的多尺度特征进行提取,通过跨模态多尺度对齐网络利用不同尺度的图像特征对联合文本特征进行指导,得到不同模态间尺度对齐后的文本特征,构建多个尺度对齐后的子空间,通过子空间和全局空间更新网络分别在全局空间和构建的多个子空间中对图像特征和文本特征进行更新,通过相似性匹配网络根据相似性匹配度,生成检索结果。本申请实现了遥感数据的多尺度建模和不同模态间的尺度对齐,保证了不同模态间不相关性的建模,丰富了不同模态数据的关系。
技术关键词
图文检索方法
文本
多尺度
跨模态
特征提取模块
图像特征提取
匹配模块
匹配网络
sigmoid函数
卷积神经网络提取
级联
门控循环单元
检索设备
线性
检索系统
对齐模块
系统为您推荐了相关专利信息
翻译方法
主题关键词
文本
自然语言
关键词提取算法
细观损伤
声发射传感器
波形特征提取
变分贝叶斯
高斯混合模型聚类
说话人验证系统
表征方法
递归神经网络
深度特征提取
噪声感知训练