一种多模态检索方法和装置

本申请公开了一种多模态检索方法和装置，涉及多模态检索技术领域，包括获取用户查询文本对应的查询向量，进而根据查询向量在向量数据库中进行查询，生成查询结果；向量数据库中保存有多个多模态表格文档对应的多层次内容块结构对应的向量编码；任一多模态表格文档的多层次内容块结构中包括：原子层、语义层和关系层；原子块包括多模态表格文档中的任一单元格的目标元素内容以及结构信息；语义块包括多模态表格文档中的任一行、或任一列、或任一整表对应的聚合内容；关系块包括描述多个原子块之间、多个语义块之间的关联关系的文本；结构信息包括各单元格对应的行、列索引，以及多模态元素间的跨模态关联关系。本申请能够提高多模态检索准确度。