摘要
本发明公开了一种基于分层架构的分布式向量存储方法,首先,设计了面向实时场景的向量表示方法和数据组织方法,并利用分层架构确保向量存储所需的可扩展性,可存储数十亿条向量数据;其次,设计了向量压缩方法,减少海量向量数据所需的存储空间占用;此外,设计了数据冷热值的计算方法和向量访问时冷热分离的机制,以提供高质量、高效的大规模向量查询。由此,本发明能够为大规模向量数据的实时查询与分析提供高效、低延迟、高可扩展性的向量存储支持。
技术关键词
存储方法
索引
内存
分布式文件系统访问
分层
远程磁盘
向量压缩方法
数据组织方法
压缩算法
层级
处理器
低延迟
计算机设备
新鲜度
计算方法
三元组
可读存储介质
系统为您推荐了相关专利信息
列存储数据库
预训练模型
语义识别技术
数据查询方法
数据库结构
强化学习模型
预测故障率
故障预测模型
网络吞吐量
磁盘
动态故障检测
监控模块
环形缓冲区
告警平台
网络接口