摘要
一种基于云原生场景的日志向量检索系统、方法及介质,涉及数据处理技术领域。日志向量服务器用于,根据接收到的日志检索请求的调度信息,将日志检索请求发送至对应的N个日志向量节点;N个日志向量节点用于,确定与日志检索请求对应的日志检索结果的存储时间与当前时间之间的时间差是否小于时间阈值;若是,在数据队列中确定与日志检索请求最相关的K个日志检索结果;若否,在数据工作器和数据队列中确定与日志检索请求最相关的K个日志检索结果;日志向量服务器还用于,通过整合K个日志检索结果确定最终检索结果。由此,该系统利用k8s节点的每个日志向量节点作为独立的日志数据存储与检索单元,避免远端存储依赖,显著提升了资源利用率。
技术关键词
应用程序日志
向量检索方法
检索系统
节点
服务器
队列
分块
数据存储
时间差
场景
分层
数据处理技术
分区
算法
介质
计算机
处理器
资源