基于多模态的商品搜索方法和系统

本发明提供了一种基于多模态的商品搜索方法和系统，涉及商品搜索技术领域。具体实现方案为：基于查询图的图向量，在多个第一候选商品中进行图图检索和图文检索，得到查询图与各个第一候选商品的第一综合评分，如果该评分不符合预设的评分条件，对查询图进行语义解析，得到查询图的文本描述向量，并基于查询图的文本描述向量，在多个第二候选商品中进行文图和文文检索，得到查询图与各个第二候选商品的第二综合评分，并基于该评分，对各个第二候选商品进行排序，得到查询图的商品搜索结果。采用本发明，可以提高基于图检索的准确度。