大数据平台数据处理方法、装置及系统

AITNT
正文
推荐专利
大数据平台数据处理方法、装置及系统
申请号:CN202410753262
申请日期:2024-06-12
公开号:CN118568790A
公开日期:2024-08-30
类型:发明专利
摘要
本发明公开了一种大数据平台数据处理方法、装置及系统,该方法包括:根据预定规则预先对用于存储数据的至少两个集群节点进行异构处理,以得到第一类节点和第二类节点;获取数据库中各数据的属性信息;将数据库中各数据的属性信息输入至预先训练的数据分类模型,以输出各数据的分类标签,所述数据分类模型基于决策数算法和训练文本进行训练;根据各数据的分类标签分别将各数据存储至所述第一类节点或者所述第二类节点。通过本发明,可以优化数据存储和管理的效率和成本,提高数据的安全性和稳定性。
技术关键词
数据分类模型训练 节点 大数据平台 数据处理方法 集群 异构 数据存储 文本 数据处理装置 标签 决策树算法 数据处理系统 处理单元 记录单元 存储单元
系统为您推荐了相关专利信息
1
一种护理机器人的控制方法、系统、存储介质及设备
护理机器人 工作站 单位耗电量 复杂度 队列
2
一种体系架构设计模型跨角度关联处理方法和系统
体系架构模型 体系架构设计 模型关联关系 数据 图元
3
一种基于大数据SPARK生态的AI分析应用方法
大数据 分布式数据存储 生态 分布式文件系统 多源异构数据
4
通信算法选择方法、装置、非易失性存储介质及电子设备
通信算法 并行策略 集群 非易失性存储介质 图形处理器
5
针对热电机组的智能化运维处理方法及系统
智能化运维 设备状态参数 异常设备 节点 热电
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号