一种基于多模态大模型的图表问答方法

本申请涉及数据处理技术领域，尤其涉及一种基于多模态大模型的图表问答方法。本申请实施例中，知识库中保存有每个图表及对应的图表名称、摘要、关键词和多模态描述，基于此，电子设备可以确定每个图表与问题文本对应的第一相似度，从而筛选出用于问答的目标图表；知识库中还保存有每个文档对应的每个文档片段，基于此，电子设备可以确定每个文档片段与问题文本的第二相似度，从而筛选出用于问答的目标文档片段。该电子设备调用多模态大模型，使得多模态大模型根据该目标图表和目标文档片段，生成该问题文本对应的回复文本，实现了基于图表和知识文本进行问答，并且该知识文本并非完整的文档，而是文档片段，提高了问答的准确率。