摘要
本申请涉及高并发数据处理技术领域,公开了一种面向高并发场景的存算一体数据调度系统及方法,该系统包括存算融合架构模块、分布式缓存模块、动态分片模块、并行计算模块、预加载模块和资源调度中心。该方法与该系统相对应。本申请,通过深度融合数据存储与计算,利用分布式缓存技术和数据预加载机制,有效减少I/O瓶颈,支持动态数据分片与并行计算,特别适用于大规模数据分析场景。
技术关键词
面向高并发
数据调度系统
分片
节点
高并发数据处理技术
机器学习模型
场景
缓存一致性
分布式缓存技术
数据状态同步
缓存策略
动态
协议
缓存管理单元
共享内存机制
数据调度方法
模块
预加载机制
哈希算法