摘要
本发明公开了一种分批分布式写数据的方法和装置,该方法包括:接收到酒店数据上传请求时,将酒店数据按照酒店标识进行分组后按照预设批次大小进行分割,得到多个数据分组;为多个数据分组分配分布式锁;依据分布式加权轮询算法,在分布式数据库服务器中分配写入负载;针对被分配写入任务的每个数据库服务器,检测数据库服务器的繁忙状态,依据繁忙状态调整数据写入策略;按照对应的写入策略,向被分配写入任务的各数据库服务器写入对应的数据分组。本申请提供的分批分布式写数据的方案,可通过将庞大的酒店数据集分割成多个小批次写入数据库服务器,能够减少单次处理的数据量,从而提高数据处理的效率和速度。
技术关键词
数据库服务器
分布式数据库
分布式锁
子模块
策略
状态检测模块
分布式系统
指标
数值
算法
标识
内存
关系
频率
速度
系统为您推荐了相关专利信息
协调优化控制方法
微电网
负荷
变量
LSTM模型
建模算法
策略
关键点
局部时空特征
网格搜索算法