基于通用标准文件的HBase批量导入方法、设备及存储介质

AITNT
正文
推荐专利
基于通用标准文件的HBase批量导入方法、设备及存储介质
申请号:CN202511228647
申请日期:2025-08-29
公开号:CN120892488A
公开日期:2025-11-04
类型:发明专利
摘要
本申请公开了一种基于通用标准文件的HBase批量导入方法、设备及存储介质,涉及数据处理技术领域,公开了基于通用标准文件的HBase批量导入方法,包括:将数仓平台导出的标准文件传输至与HBase集群关联的HDFS目录;基于所述HDFS目录,通过MapReduce作业将所述标准文件转换为符合目标HBase表结构的HFile文件;通过BulkLoad命令将所述HFile文件迁移至目标HBase目录,以完成数据导入。本申请通过直接解析通用标准文件,消除了多源数仓平台与HBase间的中间格式转换环节,提高了数仓平台导入数据至HBase的效率和可用性。
技术关键词
HBase表 数据处理器 批量 目录 集群 数据转换模块 平台 命令 数据处理技术 生成规则 可读存储介质 存储器 字段 分区 语义 报告 格式
系统为您推荐了相关专利信息
1
一种生产环境的部署方法、装置、设备及存储介质
版本控制系统 可视化组件 工作流引擎 容器 页面
2
基于多模态特征融合与动态权重优化的大模型分布式推理加速方法
动态权重优化 多模态特征融合 语义特征 决策算法 条目
3
一种虚拟电厂集群低碳协同调度方法、系统、设备及介质
虚拟电厂系统 集群 实体 面向电力系统 物理
4
多模态档案一体化元数据提取与自动挂接方法
挂接方法 数据项 标签 批量 非易失性计算机存储介质
5
一种风电集群汇集的共享储能虚拟惯量补偿控制方法
风电机组 虚拟惯量控制 补偿控制方法 动态响应模型 虚拟惯性控制
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号