摘要
本发明公开了一种基于分布式计算的数据审查方法,涉及一种分布式计算技术领域,包括以下步骤:获取待审查数据,将所述数据分片存储在分布式存储系统中并对所述存储在分布式存储系统中的数据进行预处理和特征提取;将所述特征数据按照时间顺序进行排序后,组成采购时序数据集并进行归一化处理;将完成归一化处理后的采购时序数据集基于分布式机器学习框架和卷积神经网络模型在数据审查过程中构建最优分类模型;引入实时数据流监控系统,持续监测待审查数据的变化和最优分类模型的性能,及时调整审查策略。本申请根据预先设定的规则和算法自动执行数据清洗、验证和分析,提高了审查过程的准确性和一致性。
技术关键词
数据流监控
分布式存储系统
分布式机器学习
时序
卷积神经网络模型
可视化工具
分布式优化算法
分布式计算技术
滑动窗
随机梯度下降
机器学习模型
告示板
生成特征
节点
分片
参数
切片
框架
策略
系统为您推荐了相关专利信息
自动化管理方法
深度Q网络
布隆过滤器
屏幕
图像
脉冲重复间隔
雷达
数据预处理方法
数据预处理系统
脉冲到达时间
旋挖钻机
花岗斑岩
LSTM神经网络
识别方法
长短期记忆神经网络
燃料电池系统
强度特征向量
神经网络模型
氢气浓度传感器
注意力机制