摘要
本发明公开了一种多尺度信息动态融合的遥感跨模态图文检索方法,包括:获取遥感图像文本数据集,对数据集进行数据增强处理;构建多尺度信息动态融合的遥感跨模态图文检索模型,所述遥感跨模态图文检索模型包括多尺度特征优化的图像编码器、多尺度信息动态融合模块、文本编码器、跨模态信息交互模块和损失函数模块;使用处理后的遥感图文数据集对遥感跨模态图文检索模型进行训练,得到最终遥感跨模态图文检索模型;将待检索数据输入至最终遥感跨模态图文检索模型中,获得与待检索数据相关的图像数据或与待检索数据相关的文本数据;本发明综合考虑遥感图像不同深度级别特征,提高检索精度。
技术关键词
跨模态图文检索
多尺度信息
语义特征
高层次
图像编码器
动态
多尺度特征
数据
文本编码器
注意力
卷积滤波器
模块
Softmax函数
三元组损失函数
多层次
系统为您推荐了相关专利信息
农业遥感
数据分析模块
注意力
分类方法
全局平均池化
图像编码器
多模态
统计特征
文本编码器
图像特征向量
文本分类方法
文本分类模型
大语言模型
计算机可读指令
标签
神经网络算法
轻量级卷积神经网络
残差神经网络
多尺度特征
复核系统
遥感图像分割方法
图像分割模型
二维离散小波变换
二维离散小波逆变换
联合损失函数