摘要
本发明提供了一种适用于簇索引的基于远端内存的分组存储方法及系统,包括:步骤S1:采用簇访问感知的向量分组技术存储向量,完成分组后启动系统服务;步骤S2:系统读簇时通过一次I/O请求读取簇的分组内向量数据和分组外向量地址,再发起多个独立的I/O请求读取所有的分组外向量。本发明的方法不破坏算法语义,保证向量搜索算法读到的向量和原本的实现一致,所以不同的聚类算法能很容易使用本发明优化实现;本发明遵循解耦合存储思想,通过存地址代替存数据降低了向量索引的存储压力。
技术关键词
存储方法
内存
索引
启动系统
数据
搜索算法
节点
存储系统
日志
频率
建图
语义
策略
压力