一种用于特定专业领域的多模态知识问答检索方法及系统

本发明公开了一种用于特定专业领域的多模态知识问答检索方法及系统，属于数据处理技术领域。本申请通过大模型预处理，在每个模态中计算特征向量之间的余弦相似度，以构成相似性矩阵，采用和知识库文本相同的向量化处理方式，以实现问题与专业领域知识库文本直接的向量计算。根据输入的问题向量，通过专业领域知识库里的向量化索引检索，从专业领域知识库中挑选出若干与问题向量最接近的文本向量，以得到与问题相关的若干知识以及每一条知识的出处。本申请有效提升了目标领域的知识问答回复准确性，保障了目标领域的知识问答回复的完整性，并实现了依据支撑，支持本地化部署，解决信息安全问题，实现了知识问答检索的智慧化应用场景。