跨模态检索模型的训练方法及跨模态检索方法

本发明涉及跨模态检索技术领域，其公开了一种跨模态检索模型的训练方法及跨模态检索方法，训练方法包括：构建跨模态检索模型；采用低参数训练方法对跨模态检索模型进行训练；在跨模态检索模型中集成哈希层学习哈希映射；构建排序感知损失优化输入跨模态检索模型的训练样本之间的排序顺序；检索方法包括：将查询样本输入到跨模态检索模型中；跨模态检索模型对查询样本进行特征提取；跨模态检索模型将提取的高维特征转换为低维且连续的类二进制编码；对类二进制编码进行处理转化为二进制编码；比较查询样本的二进制编码与数据库中存储样本的二进制编码之间的相似性；输出与查询样本在语义上相关的检索结果。本发明检索效率高且检索性能好。