一种互联网大数据信息处理系统

本发明公开了一种互联网大数据信息处理系统，包括：数据采集模块：包括传感器，用于采集工业数据；数据预处理模块：用于对采集到的工业数据进行数据预处理；涉及大数据信息处理技术领域，在冗余特征去除模块，先采用皮尔逊相关系数计算相关程度，通过层次聚类或K‑均值聚类算法将特征分组，以此判断特征是否冗余，并对冗余特征进行标记，在工业数据处理过程中，针对特征之间存在的冗余特征问题进行有效处理。通过去除冗余特征和优化数据结构，减少了数据分析时占用的资源，缩短了分析时间，解决了因冗余特征导致分析过程中关注重复信息而效率低下的问题，从而提升了工业数据处理的整体效率。