一种基于大模型的知识库管理系统

本发明涉及知识库管理技术领域，尤其涉及一种基于大模型的知识库管理系统，该系统包括数据采集模块、数据处理模块、知识库构建模块以及验证模块。本发明通过对文本数据进行连续扫描，以去除重复内容，避免分词错误，通过将社保领域的源数据进行分类，以收集其中的非结构化数据进行数据转化，即通过对非结构数据中的文本进行处理，识别出文本中的实体和概念，以及识别和记录实体间的关系，提高数据的可用性和查询效率，通过结合用户的反馈数据，验证分词处理的准确性，通过记录用户的查询数据，自动识别是否出现错误的分词结果，进而调整分词处理流程和模型训练参数，实现有效管理社保服务系统。