摘要
本发明公开了一种跨集群doris无人值守数据迁移方法,包括:通过连接源Doris集群获取待迁移表的元数据,解析并调整元数据中与目标集群不兼容的表结构特征,生成兼容的建表语句,并在目标集群中创建目标表;通过预设接口调用数据迁移平台的API,自动配置并提交迁移任务,迁移任务包含源表、目标表及表关联信息;实时轮询任务状态,根据任务执行结果触发下一迁移任务或异常处理流程;按预设规则依次执行所有待迁移表的处理,并限制并发任务数量以维持集群稳定性;迁移完成后,对源表与目标表进行多维度数据一致性验证,并根据验证结果触发修复流程。本发明提升了跨版本Doris数据库迁移的效率和可靠性,有效减少了人工介入及操作失误。
技术关键词
数据迁移方法
集群
数据一致性验证
字段
数据同步
策略
语句
日志
分区
定义
平台
接口
资源
模式
批量
通知
代表
算法
系统为您推荐了相关专利信息
终端设备
人工智能模型
代表
强化学习模型
DQN算法
文件加密解密方法
文件加密解密系统
文件特征
拆分规则
消息