基于提示学习与自适应Mamba门控选择融合跨模态哈希检索方法

AITNT
正文
推荐专利
基于提示学习与自适应Mamba门控选择融合跨模态哈希检索方法
申请号:CN202411459788
申请日期:2024-10-18
公开号:CN119322871A
公开日期:2025-01-17
类型:发明专利
摘要
本发明公开了基于提示学习与自适应Mamba门控选择融合跨模态哈希检索方法,主要涉及深度跨模态哈希检索领域;包括步骤:S1、将图像数据集及图像数据集对应的类别标签信息分别对应分成:训练集和检索集;S2、对图像信息进行预处理;S3、构建基于提示学习与自适应Mamba门控选择融合跨模态哈希检索架构;S4、利用训练集,通过训练得到模型;S5、将检索集图片输入经过训练的模型;S6、取测试集测试最好的模型权重进行保存,并保存在测试集上表现效果最好的哈希码;本发明能够缓解语义截断的发生,补充上下文语义的缺失,能重新选择融合不同模态特征,以提高对检索结果有利的语义特征权重,降低负面语义信息的权重。
技术关键词
跨模态 图文 全局平均池化 融合特征 特征提取模块 加权特征 图像 动态 状态空间模型 特征提取网络 文本编码器 标签 图片 多层感知机 训练集 语义
系统为您推荐了相关专利信息
1
基于岩心标签与相似度的岩相识别方法、系统和相关设备
岩心 特征提取模型 样本 岩相识别方法 测井
2
图像去雾方法、装置、设备、介质及程序产品
雾霾图像 特征提取模块 图像去雾模型 图像去雾方法 图像纹理特征
3
文本识别方法及装置
多通道特征 文本识别模型 训练样本图像 子模块 扩展模块
4
基于压电陶瓷驱动的谐振系统质量检测方法
谐振系统 压电陶瓷驱动 实时数据 关键词 语义特征
5
一种融合多模态信息的深度伪造视频检测方法及装置
伪造视频检测方法 融合多模态信息 融合特征 视频帧 音频
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号