多源数据归并增量抽取方法和系统

本发明涉及异构数据源数据同步技术领域，提供一种多源数据归并增量抽取方法和系统，方法包括：将源表中所有数据记录插入到目标表中；分别对源表和目标表进行逐行特征值计算；对计算得到的源表和目标表中的特征值进行归并排序，得到第一集合和第一时间复杂度以及第二集合和第二时间复杂度；计算差集；根据差集计算结果，确认插入记录和删除记录；分别对确认的插入记录和删除记录对应的插入数据和删除数据进行分片操作，形成多个插入分片和多个删除分片；分片操作后，先执行线程池批量删除各删除分片，再执行线程池批量插入各插入分片。本发明适用于所有关系型数据库表，库表无需存在自增主键或时间戳等特殊字段。