摘要
本申请公开了一种多模态检索特征库构建方法、多模态检索方法及相关装置,涉及多模态检索技术领域,方法包括:获取多模态数据;对多模态数据包含的每个模态的数据获取多个维度的特征,得到每个模态的数据对应的特征集;将每个特征集中的特征融合;将多个模态的数据分别对应的融合特征融合,得到多模态融合特征;将多模态融合特征存储至多模态检索特征库;在构建好特征库后,获取查询数据,并将其处理成查询特征;从多模态检索特征库中确定与查询特征相似度最高的N个特征,将N个特征对应的多模态数据确定为检索结果并输出。本申请公开的特征库构建方法可构建出高质量的多模态检索特征库,本申请提供的检索方法具有较高的检索召回率和检索准确度。
技术关键词
特征库构建方法
文本
音频
多模态检索方法
图像
查询特征
分词
语义信息提取
数据获取模块
多模态检索技术
计算机可读指令
电子设备
融合特征
听觉
视频
数据处理模块
系统为您推荐了相关专利信息
颜色
边缘检测方法
轮廓提取
掩膜
图像边缘检测技术
实体消歧方法
时间关系信息
图谱
大语言模型
分析单元
工业机器人
数据采集装置
监控装置
参数
报警装置
PCB电路板
特征纹理
缺陷检测方法
局部二值模式
缺陷检测装置
三维建模系统
三维建模方法
相机成像模型
分析单元
三维模型