摘要
本发明提供一种基于LLM与RAG技术的担保知识智库构建方法和系统,所述方法包括:S1、收集担保知识资料文件并导入到检索增强生成RAG系统中,形成初版知识库;S2、加载并解析所述初版知识库中的担保知识资料文件,将解析得到的文本内容存储在内存中,形成完整的知识文本数据;S3、使用优化的分词策略对所述知识文本数据进行分词,得到多个大文本块和对应的小文本块;S4、确定并使用最优的嵌入模型,将由大文本块以及对应的小文本块构成的知识块进行向量嵌入处理,转换为向量表示后存入向量数据库,形成担保知识智库。本发明可以基于LLM与RAG技术构建担保知识智库。
技术关键词
文本
代表
分词方法
分块
资料
分词模型
语义结构
摘要
构建系统
标识
内存
数据
电子设备
策略
索引表
处理器
指令