摘要
本申请公开了一种日志存储传输处理方法、系统、电子设备及介质,包括:在客户端获取用户请求的出入参和链路日志,得到待存储日志信息;对待存储日志信息进行序列化和第一压缩处理,得到第一日志信息;根据第一日志信息的报文大小和服务集群中的服务端数量,将第一日志信息通过用户数据报协议或者超文本传输协议发送到服务集群;在服务集群中,将第一日志信息写入双缓冲队列,通过多线程聚合的方式传输到存储集群;在存储集群,对第一日志信息进行第二压缩处理,存储到存储集群的数据库中。本申请提高了日志存储传输的效率和应用性能,在日志传输过程中不需对磁盘进行读写操作,节约了服务器的资源,降低了技术成本,可广泛应用于计算机技术领域。
技术关键词
存储日志信息
存储集群
服务集群
超文本传输协议
数据报协议
服务端
多线程
报文
队列
客户端
服务器
自定义输出
链路
缓冲
索引
电子设备
处理器
计算机存储介质
哈希算法
系统为您推荐了相关专利信息
电力运行数据
分布式存储集群
分布式存储方法
数据管理模块
物联网关
备份文件
分布式文件系统
linux操作系统
集群文件系统
热备份方法
日志自动采集
判定系统
缺陷管理工具
日志分析
自动化测试框架
任务调度系统
分布式存储模块
网络通信模块
数据传输延迟
任务调度方法