摘要
本发明公开了基于提示学习与自适应Mamba门控选择融合跨模态哈希检索方法,主要涉及深度跨模态哈希检索领域;包括步骤:S1、将图像数据集及图像数据集对应的类别标签信息分别对应分成:训练集和检索集;S2、对图像信息进行预处理;S3、构建基于提示学习与自适应Mamba门控选择融合跨模态哈希检索架构;S4、利用训练集,通过训练得到模型;S5、将检索集图片输入经过训练的模型;S6、取测试集测试最好的模型权重进行保存,并保存在测试集上表现效果最好的哈希码;本发明能够缓解语义截断的发生,补充上下文语义的缺失,能重新选择融合不同模态特征,以提高对检索结果有利的语义特征权重,降低负面语义信息的权重。
技术关键词
跨模态
图文
全局平均池化
融合特征
特征提取模块
加权特征
图像
动态
状态空间模型
特征提取网络
文本编码器
标签
图片
多层感知机
训练集
语义
系统为您推荐了相关专利信息
雾霾图像
特征提取模块
图像去雾模型
图像去雾方法
图像纹理特征
多通道特征
文本识别模型
训练样本图像
子模块
扩展模块
谐振系统
压电陶瓷驱动
实时数据
关键词
语义特征
伪造视频检测方法
融合多模态信息
融合特征
视频帧
音频