一种基于湖仓一体的异构能源数据存储方法

AITNT
正文
推荐专利
一种基于湖仓一体的异构能源数据存储方法
申请号:CN202411815764
申请日期:2024-12-11
公开号:CN119759996A
公开日期:2025-04-04
类型:发明专利
摘要
本发明公开了一种基于湖仓一体的异构能源数据存储方法包括,收集异构能源数据,并对所述数据进行预处理;对处理后的数据利用FCM算法进行模糊聚类提取出特征关键字;基于Hive组件将所述HDFS组件中的所述源数据加载到基于Hive组件创建的湖仓表中。本方法通过FCM聚类和ETL工具统一异构能源数据,优化数据加载和查询效率,降低处理耗时。利用湖仓一体架构增强了数据治理和跨领域共享,提升了系统扩展性和灵活性,降低数据处理耗时,提高数据查询及执行的效率并有效降低数据孤岛难统一管理的问题。
技术关键词
能源数据存储方法 FCM算法 异构 关键字 电力行业数据 聚类 数据仓库工具 文件系统 处理器 计算机设备 矩阵 可读存储介质 指数 存储器 格式 基础
系统为您推荐了相关专利信息
1
一种深度行为感知的APT攻击智溯源分析方法
信息系统 溯源分析方法 日志 操作系统 网络端口
2
多源数据融合的棉田碳汇动态评估方法及系统
多源异构数据 时空分布特征 因子权重 主成分分析法 对齐技术
3
基于用户SQL特征行为分析的数据库防勒索方法及装置
语义匹配方法 校验算法 数据访问模式 计算机可读取存储介质 预训练模型
4
一种GIS隔离开关的运行状态与表征状态参量方法
GIS隔离开关 QPSO算法 经验小波变换 加权融合算法 深度信念网络
5
一种基于多源信息增强与反正切秩近似的circRNA-疾病关联预测方法
疾病关联预测方法 异构 推理方法 增广拉格朗日乘子方法 矩阵
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号