一种智能化大数据平台的数据清洗方法

本发明公开了一种智能化大数据平台的数据清洗方法，涉及互联网与大数据技术领域，解决的是信息数据格式多样、结构复杂和实时处理速度过慢的问题；数据清洗方法，包括获取移动终端反馈的海量信息数据；根据终端类型和数据采集时间将海量信息数据划分为若干个子数据块；按照事件业务类型，将每个子数据块内的信息数据进行分类和分级；根据各业务数据格式标准，将完成数据分类的信息数据进行格式检验和数据清洗；提取信息数据的关键信息，并验证信息数据关联性；合并所有子数据块及具有关联性的信息数据；根据事件紧迫度，将完成合并的信息数据进行排序；通过混沌校验码完成移动终端的身份校验，通过内容清洗模型将信息数据的内容进行自动纠错。