摘要
本申请涉及一种实时日志异常检测方法、装置、计算机设备和存储介质,该方法包括:采用流处理框架收集日志数据,并对日志数据进行解析,生成结构化数据;基于结构化数据对基于bi‑LSTM的离线模型进行深度学习训练,得到Transformer结合LSTM的预测模型;将通过流处理框架获取的实时日志使用所述预测模型进行异常检测,得到实时日志的预测结果;基于实时日志的预测结果,利用FTRL算法对预测模型进行模型参数在线更新。通过在Transformer编码器结构中引入LSTM,增强时间序列建模能力,避免Transformer处理长序列时对局部依赖的忽略,并结合预测结果使用FTRL算法优化在线模型,保持模型的长期稳定性,有效提高了异常检测效率和准确性。
技术关键词
实时日志
生成结构化数据
深度学习训练
收集日志数据
多头注意力机制
语义向量
异常检测方法
计算机设备
参数
序列
异常检测装置
编码器结构
离线
算法
在线
模型训练模块
框架
数据处理模块
系统为您推荐了相关专利信息
检索方法
节点
混合专家网络
语音特征
多模态信息
图像分类方法
多模态
细粒度分类
融合视觉特征
图片类别
优化监控方法
分布式设备
异常数据
深度学习模型
云端
制图方法
计算机视觉
主动学习策略
特征加权融合
dice损失函数