摘要
本发明公开了一种数据分布方法、装置、设备及介质,涉及分布式存储技术领域。本方案通过一致性协议管理和收集存储系统的拓扑结构和有序键分片信息,实现了对集群元信息的管理,保证了元信息的一致性;在此基础上,将有序键分片的哈希标识符作为CRUSH算法的输入,具体将有序键分片的哈希标识符一次映射到放置组,再基于CRUSH算法从放置组二次映射到底层的数据库列表,使得同一个有序键分片的键都会写到同一个数据库列表,有效提高了范围查询的效率,避免了中心化调度瓶颈和数据热点问题,提高了大规模分布式KV存储系统的可扩展性和性能。
技术关键词
数据分布方法
分片
散列算法
一致性协议
标识符
哈希算法
键值存储系统
分布式KV存储系统
列表
层级
数据分布装置
管理存储系统
分布式存储技术
资源消耗量
集群
可读存储介质
存储计算机程序
系统为您推荐了相关专利信息
视频监控方法
组合优化算法
历史轨迹数据
标识符
卡尔曼滤波
水利水情监测管理系统
北斗短报文通信
节点
数据压缩
前向纠错编码
车辆检测方法
检测车辆环境
生成训练样本
计算机可读指令
数据
无纸化会议
文件保护方法
加密算法
终端设备
动态