一种基于人工智能神经网络的大数据分析数据预处理算法

本发明公开了一种基于人工智能神经网络的大数据分析数据预处理算法，该算法包括以下步骤：S1、对原始数据进行清洗，去除无效数据和异常值；S2、通过神经网络对数据进行特征提取和降维处理，得到数据的低维表示，所述神经网络的结构为深度神经网络，并且使用自编码器进行无监督学习；本发明通过引入高效的特征选择与降维技术，显著减少了高维数据的训练时间，同时有效抑制了过拟合问题，通过优化数据表示方式，能够保留数据的关键特征，减少计算复杂度，提高模型的训练效率，此外，采用新的正则化方法来控制模型复杂度，进一步避免了高维数据中的过拟合，从而提升了模型的泛化能力。