摘要
本发明公开了一种基于元数据的数据比对方法。它具体包括如下步骤:获取来源数据库与目标数据库的数据结构制定相应的元模型;根据元模型及数据库的连接信息,读取来源数据库与目标数据库的元数据并记录至中间数据库中进行比较;基于元数据中的表总记录数、字段数据类型等,确认分片取模基数大小,并采用XXHash算法计算唯一标识键的哈希值,确定分片的数量、各分片的编号以及每个分片对应的哈希值范围;再次采用XXHash算法对相应分片的数据进行计算,生成相应的散列值;对比相应分片内的详细数据,并输出差异结果。本发明的有益效果是:优化数据处理过程,保持较高的计算速度,有效提升整体效率,能够高效准确地比对两个或多个数据集。
技术关键词
数据比对方法
分片
关系型数据库
标识
内存
字段
算法
数据字
计算方法
程序
模式
实体
代表
定义
系统为您推荐了相关专利信息
波形生成方法
参数
显示控制芯片
亮度校正
显示数据处理技术
三维立体模型
融合展示系统
智能终端
射频识别标签
可交互功能
位图数据结构
权限管理方法
数据库存储方式
多用户
支持高并发
设备标识码
认证方法
终端设备
区块链智能合约
国际移动设备标识