摘要
本发明涉及计算机数据处理技术领域,公开了一种分布式架构下的数据分割和查询处理系统。该系统包括数据分割模块,基于自适应分块算法划分数据块;分布式存储模块,用一致性哈希算法分配数据块并动态调整虚拟节点分布;索引构建模块,通过多层倒排索引算法生成全局索引表;查询优化模块,利用查询重写算法转换查询语句;结果聚合模块,采用并行聚合算法处理子查询结果。该系统能够根据数据特征动态处理数据,优化数据存储和查询过程,有效提升分布式系统的数据处理效率与查询性能,适用于大数据存储、分析等场景。
技术关键词
查询处理系统
分布式架构
分块算法
分布式存储模块
索引算法
索引表
哈希算法
原始查询语句
虚拟节点数量
树形结构
滑动窗口
查询关键词
动态
数据存储