摘要
本发明适用于大数据管理领域,提供了一种大数据平台管理系统,所述系统包括:预处理模块、数据计算模块、模型建立模块和监测预警模块。通过本发明所提供的的算法,能够更好地处理复杂的异常检测问题。即便在数据分布遭受破坏和存在较大噪声时,也能够给出比较准确和稳定的异常检测模型,可以有效地进行异常检测,不需要已知正常数据的集合,因此能够更好地应对未知异常情况,将新数据进行分类,可以将异常数据和正常数据进行有效分离。在异常数据检测预处理环节中,能够准确地筛选出异常样本并对其进行标记。且能够进行实时监测和预警,及时报警,降低数据异常对业务运营和管理带来的风险和损失。
技术关键词
大数据平台管理
数据分析模型
指标
选取算法
机器学习算法
预警模块
异常数据检测
数据转换单元
特征值
数据分析单元
表达式
清洗单元
特征选择
数据分布
数据管理
系统为您推荐了相关专利信息
机器学习算法
客运站
识别方法
道路监控视频
随机森林模型
飞行器
飞行控制系统
机器学习算法
气溶胶传感器
太阳辐射传感器
心脏病预测方法
基础分类器
斯皮尔曼相关系数
组合算法
评价预测模型
航空发动机
典型
人工神经网络训练
三维模型
零件机械加工