摘要
一种数据库增量数据采集方法及装置,利用数据库的归档日志信息来判断系统负载情况:在数据同步前,查询数据库的历史归档文件信息来预测未来一段时间内的归档生成速度,并计算一个基准速度,预测速度小于基准速度就采集数据,预测速度大于基准速度就暂停采集,使数据采集能在数据库相对空闲的时间内进行;在采集过程中,为了确保数据能来得及采集,根据日志解析延迟量,对基准数据进行调整。该方法能准确判断并避开系统繁忙时间段进行增量数据采集,有效降低对数据库的影响,适用与对数据采集实时性要求不高、但要求采集工作对生产系统影响要小的场景。
技术关键词
增量数据采集方法
基准
时间段
数据接收模块
补偿计算方法
速度预测模型
数据采集装置
日志解析
数据库系统
判断系统
断点
延迟量
数据同步
策略
节点
系统为您推荐了相关专利信息
数据获取模块
推荐系统
多样式产品
存储库
数据获取单元
寿命预测系统
浪涌保护装置
寿命预测方法
支持向量回归模型
电流