摘要
本发明公开了一种用于实时流数据的自适应动态数据清洗方法,涉及数据清洗领域,包括以下步骤:获取相应的业务需求数据和实时流数据;根据业务需求数据对所获得的实时流数据进行多次分类处理,将其输入至相应的数据链路通道内;根据数据链路通道内相应清洗节点所对应的分类处理结果对相应的实时流数据进行数据异常性评估,获取相应的节点异常数据,并根据其设置相应实时流数据的清洗路径;根据相应的清洗路径对实时流数据进行数据清洗,对清洗过程进行实时反馈,生成反馈采样调整信息;根据反馈采样调整信息对相应实时流数据的获取过程进行动态调整,输出实时流数据完成数据清洗的过程;本发明在一定程度上提高了数据清洗过程中的效率。
技术关键词
动态数据清洗方法
异常数据
数据采集单元
通道
采样率
标准偏差数据
数据验证
链路
机器学习算法
框架
节点处
决策
规划
训练集
曲线
指标
系统为您推荐了相关专利信息
发泡注塑工艺
扫地机器人
发泡注塑机
熔体
泄压通道
网络架构
搜索方法
通道注意力机制
节点
图像识别模块
精准喷洒系统
森林病虫害
无人机飞行姿态
地理加权回归
数据分类
静电纺纤维
脂质体溶液
取向
生物医用材料技术
微流控芯片技术