摘要
本申请实施例公开了一种数据库多源异构数据同步方法及装置,方法包括:通过部署在源数据库所在服务器的RPA机器人监听数据变更事件,当检测到结构化数据或非结构化数据的变更操作时,生成初始数据集合;对初始数据集合进行分片处理,生成多个数据分片任务,并将数据分片任务分配至分布式计算节点执行并行格式转换操作以生成目标数据集合;对分布式计算节点的任务执行状态进行检测,当检测到目标数据集合的生成完成事件时,激活数据同步通道并将目标数据集合传输至目标数据库;基于目标数据库中配置的RPA冲突处理策略进行冲突检测识别,当识别到主键冲突或唯一性约束冲突时,基于预设的冲突合并指示信息更新目标数据库,并生成数据同步日志。
技术关键词
分布式计算节点
分片
多源异构数据
分布式存储节点
RPA机器人
数据同步
同步方法
流量控制策略
标识符
日志
脚本
唯一性
字段
信息更新
序列
数据完整性校验
数据分布特征
状态采集器
错误码
系统为您推荐了相关专利信息
分布式存储管理
隐私保护模块
特征提取模块
纳什均衡策略
访问控制单元
数值天气预报数据
分布式新能源电力
语义特征
时间段
时序特征
多源异构数据
多头注意力机制
能源管理系统
特征选择
皮尔逊相关系数
内容生成方法
社交媒体平台
阻力
BERT模型
留言板