摘要
本申请涉及一种知识数据存储和管理方法、装置、设备及存储介质,应用在数据检索领域,包括获取待存储的知识数据,并提取所述待存储的知识数据的文本信息;对所述文本信息进行预处理,并生成标准化文本信息;将所述标准化文本信息转换为向量格式的数据,并生成知识向量数据;根据预设的标准将所述Milvus数据库划分为若干存储层次,并计算每个所述存储层次的存储性能指标;计算所述知识向量数据的数据热度,并根据所述数据热度和所述存储性能指标,将所述知识向量数据存储至所述Milvus数据库对应的存储层次。本申请具有的技术效果是:自适应分配存储资源,提高存储和检索效率。
技术关键词
生成知识
文本
BERT模型
管理系统
管理方法
分配存储资源
关键字
格式
分词
数据存储模块
生成向量
数据获取模块
数据处理模块
冗余
管理装置
数据更新
处理器
计算机设备
系统为您推荐了相关专利信息
线索
信息筛选方法
机器学习算法
文本
远程服务器
文本
Siamese网络
资源使用量
深度学习模型
统计特征
融合语义
语义向量
生成方法
多源异构数据融合
自然语言文本