基于聚类的稀疏与密集检索增强生成系统及其方法

本发明涉及一种基于聚类的稀疏与密集检索增强生成系统及其方法包括密集知识库的构建模块，用于将文档拆分成固定大小的chunk，并对chunk进行向量化处理，使用K‑means算法对向量化后的chunk进行聚类；密集知识库线向量筛选模块，用于根据用户查询，筛选出与查询相似度高于预设阈值的簇中的向量；稀疏向量引入模块，用于将筛选出的密集向量转换为稀疏向量，以实现字符级别的精确检索。本发明的优点是：通过聚类密集向量的方式缩短了检索的时间，并通过稀疏与密集向量的结合解决实现了准确率更高且完备的RAG系统。