一种数据安全并集处理方法及系统

本发明公开了一种数据安全并集处理方法及系统，属于数据管理技术领域，解决了由于哈希冲突是哈希算法的固有缺陷，无法完全避免，引入跨分片检索会破坏分片并行性，显著增加合并复杂度，导致分片号匹配可能因哈希冲突导致实际关联数据分散在不同分片，需跨分片检索的问题。包括如下步骤：动态分片，根据主键的数据热度。本发明通过动态分片、分布式布隆过滤器冲突预检及局部重定向查询技术，结合多线程并行处理和实时负载均衡优化，将哈希冲突导致的跨分片检索比例进行限制，在保障分片并行性的同时降低哈希冲突率，进行超大数据集合并，避免出现分片号匹配可能因哈希冲突导致实际关联数据分散在不同分片，需跨分片检索的问题。