摘要
本申请涉及一种图文问答的处理方法、装置、计算机设备和可读存储介质和计算机程序产品。所述方法包括:获取用户提问数据,确定用户提问数据的数据类型;根据数据类型确定用户提问数据的目标向量表示,以及目标向量表示的多种向量匹配模态;按照每种向量匹配模态,从预设的多模态数据库中确定与向量表示匹配的多个向量表示;多模态数据库中包括多个文档数据块,每个文档数据块包括元数据,元数据包括不同模态的向量表示;确定与多个向量表示关联的候选文档数据块;根据每个向量表示和目标向量表示的相似度,从候选文档数据中确定目标文档数据块;根据目标文档数据块确定与用户提问数据对应的图文数据。采用本方法能够输出可靠和准确的图文数据。
技术关键词
图片
文本
图文
多模态数据库
计算机设备
计算机程序产品
索引
内容概括
关键字
大语言模型
数据获取模块
数据处理模块
处理器
编码
匹配模块
关系
可读存储介质
分层
存储器