摘要
本发明涉及计算机信息处理技术领域,公开了一种日志智能解析方法、系统、设备及介质,包括:获取技防设备和业务系统数据,并进行第一处理;根据第一处理后的数据总结解析规则,针对每种解析规则通过实时流计算方式解析对应数据,并对未正常解析的数据进行处理;机器学习程序通过第一分类算法比较未解析数据和已解析数据的相似性,将相近的未解析数据发送给入库程序;入库程序通过数据解析程序若字段能自动分解,则生成新的解析规则插入数据库,否则插入待配置列表,让用户手动配置解析规则,以实现数据智能解析。本发明通过持续训练可动态适应新的数据规则,有效解决传统方法维护成本高、适应性差的问题。
技术关键词
智能解析方法
数据解析程序
业务系统数据
技防设备
日志
计算机可执行指令
智能解析系统
样本
算法
列表
数据处理模块
邻居
处理器
队列
可读存储介质
消息