摘要
本申请公开了一种异构能源数据处理方法、设备及存储介质,属于多模态数据处理技术领域。本申请通过预设的Spark Streaming从kafka实时接入多源的异构能源流数据,并根据不同的数据源的类型,生成规整数据流;通过所述Spark Streaming,将所述规整数据流进行微批次分割,并从分割后的数据流中提取相应特征,得到特征向量流;将所述特征向量流存储至相应时序数据库,以供相关人员从所述时序数据库中调取所述特征向量流,通过Spark Streaming将从kafka处接入的实时数据按照微批次分割处理等方式,生成相应的特征向量流,以此实现了高效实时处理异构能源数据的效果,并保障了为能源领域的实时监测、分析和决策提供准确、及时的数据支持。
技术关键词
能源数据处理方法
异构
数据处理程序
数据处理设备
时序
连续性
关键词
数据处理技术
执行器
处理器
实时数据
多模态
存储器
速率
频率
资源
参数
系统为您推荐了相关专利信息
测试场景生成方法
推理思想
深度优先搜索算法
平台
装备
大坝
构建数据融合模型
监测方法
数据融合算法
碾压设备
瓶颈
ETL系统
数据输入装置
重构误差
XGBoost算法