一种基于分布式文件系统实现千亿数据实时返回的方法

AITNT
正文
推荐专利
一种基于分布式文件系统实现千亿数据实时返回的方法
申请号:CN202510523438
申请日期:2025-04-24
公开号:CN120429278A
公开日期:2025-08-05
类型:发明专利
摘要
本发明公开了一种基于分布式文件系统实现千亿数据实时返回的方法,涉及区块链技术领域,本发明通过构建实时增量分析层与离线增量分析层,分别处理实时高频数据与历史海量数据。实时层通过缓存优化、增量聚合及高效压缩技术实现毫秒级响应,离线层通过数据湖存储、预计算及分层分发保障历史数据快速查询。两者结合支持多维度聚合分析,解决了区块链千亿级数据实时查询与高吞吐量难题,显著提升系统性能与可靠性。
技术关键词
分布式文件系统 关键字 数据库主键 数据处理方式 离线 数据流控制模块 实时数据 数据存储 LRU算法 布隆过滤器 数据分析模块 还原数据 分层 区块链技术 内存 提升系统 键值 磁盘 格式
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号