大语言模型辅助的检索增强视觉问答方法、装置

本发明提供一种大语言模型辅助的检索增强视觉问答方法，包括：获取待查询图像，以及所述待查询图像对应的待回答问题；对所述待查询图像和所述待回答问题进行实体匹配处理，得到所述待查询图像中与所述待回答问题相关的目标实体信息；基于所述目标实体信息对所述待查询图像进行视觉定位处理，得到所述待查询图像中与所述待回答问题相关联的感兴趣区域；基于所述待回答问题、所述待查询图像和所述感兴趣区域，从知识库中检索得到所述待回答问题的答案。通过对待查询图像中与问题直接相关的感兴趣区域进行准确定位，能够有效提升知识检索结果的准确性。