摘要
本发明提供了一种基于跨尺度对齐的图文互检索方法、系统、设备及介质,包括:获取待检索信息以及检索目标数据库;对待检索信息以及检索目标数据库中的检索目标进行标记化处理,获得标记序列;对标记序列中的标记进行编码处理,获得待检索信息以及检索目标的特征嵌入表示;基于待检索信息和检索目标对应的标记序列,分别基于各自标记之间的位置关系和共现关系进行语义聚合,获得标记序列的第一子序列集合和第二子序列集合,并基于两个集合的融合结果,获得待检索信息的语义聚合结果和检索目标的语义聚合结果;基于待检索信息的语义聚合结果,计算其与检索目标数据库中检索目标的语义聚合结果的相似度,基于相似度结果获得图像或文本检索结果。
技术关键词
检索方法
标记
序列
语义
图文
文本
非暂态计算机可读存储介质
图像
关系
特征提取单元
数据获取单元
标签类别
检索系统
计算机程序产品
处理器
编码
矩阵
注意力机制
视觉
滑动窗口
系统为您推荐了相关专利信息
自主避障方法
牵引车
最佳行驶路径
大区域
交通事故数据
低压分布式光伏
概率密度函数
容量计算方法
时间序列模型
分布式电源系统
海上风电场
预报方法
无缝隙
多头注意力机制
融合多源数据
WiFi接入设备
监测预警系统
WiFi设备
远程控制接口
深度学习模型