一种人工智能的大数据处理与管理系统

本发明公开了一种人工智能的大数据处理与管理系统，数据采集模块，属于大数据处理领域，包括数据采集模块、预处理分配模块以及数据分析模块；通过对多个数据源进行数据采集，并对数据采集过程进行监控获取日志和数据采集时间；通过对接收的采集数据利用训练好的随机森林模型实施预处理以及隐私判断，并根据判断结果中的标签来将元数据上传至私有链或者公有链；通过构建K‑Means聚类算法模型对原始数据集进行分组，计算每个特征向量和簇中心之间的相似距离，并评估聚类结果与真实分类的一致性；通过对数据传输过程进行分析，获取数据传输干扰比和数据传输速率，评估数据传输的效果。