摘要
本发明公开了智能数据精准质量管理系统、方法及装置,涉及数据质量管理技术领域,规则变更时生成规则更新事件并通过Kafka发布,在规则更新时检测新旧规则间的差异,在差异度超过预期时自动触发回滚机制,使用预设规则对预处理后数据进行校验,对异常数据进行分类后获取若干个异常数据类,对已分类的异常数据进行自动纠正;对仍然无法纠正的异常数据进行识别与分类,将识别获取的隔离数据类从主数据流中迁移至隔离队列,将无法立即处理的异常数据保留在隔离队列中,定期提醒数据接收端进行处理;无法即时处理的异常则被继续留在隔离队列中,并以约束的提醒频率通知数据接收端,以确保潜在高危异常不会长久堆积。
技术关键词
管理方法
接收端
生成规则
队列
负载均衡算法
异常状态
数据处理设备
JIT编译器
Raft协议
事件驱动架构
管理系统
异常数据处理
纠错
指标
实时数据
机器学习模型
动态
指令
系统为您推荐了相关专利信息
拓扑特征
智能化档案管理方法
规划算法
动态知识图谱
构建预测模型
网络节点
优化管理方法
热电联产机组
能量管理
分布式可再生
路内停车管理方法
停车位数量
交通出行方式
收费机制
矩阵