一种日志处理方法、装置及电子设备制造方法及图纸

技术编号:37989969 阅读:15 留言:0更新日期:2023-06-30 10:04
本申请提供一种日志处理方法、装置及电子设备,所述方法包括:获取日志集中每一字符的参数信息,所述参数信息包括字符的位置信息以及与所述位置信息对应的频次信息;使用每一字符的位置信息以及与所述位置信息对应的频次信息,建立目标频繁模式树,在所述目标频繁模式树中对于存在至少两个位置信息的字符包括至少两个节点,每个节点对应一个位置信息;基于所述目标频繁模式树获取目标日志模板;使用所述目标日志模板对待处理日志进行处理。本申请可以提高日志处理效率。请可以提高日志处理效率。请可以提高日志处理效率。

【技术实现步骤摘要】
一种日志处理方法、装置及电子设备


[0001]本申请涉及网络传输
,尤其涉及一种日志处理方法、装置及电子设备。

技术介绍

[0002]日志数据的复杂性为日志处理与特征提取带来了极大的困难与挑战。一直以来,运维人员传统的分析手段是人工通过写规则来筛选检查日志数据中可能存在的异常,并对关键字进行正则匹配的方式对日志进行处理,效率较低。

技术实现思路

[0003]本申请提供一种日志处理方法、装置及电子设备,以解决日志处理效率较低的问题。
[0004]第一方面,本申请实施例提供了一种日志处理方法,包括:
[0005]获取日志集中每一字符的参数信息,所述参数信息包括字符的位置信息以及与所述位置信息对应的频次信息;
[0006]使用每一字符的位置信息以及与所述位置信息对应的频次信息,建立目标频繁模式树,在所述目标频繁模式树中对于存在至少两个位置信息的字符包括至少两个节点,每个节点对应一个位置信息;
[0007]基于所述目标频繁模式树获取目标日志模板;
[0008]使用所述目标日志模板对待处理日志本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种日志处理方法,其特征在于,包括:获取日志集中每一字符的参数信息,所述参数信息包括字符的位置信息以及与所述位置信息对应的频次信息;使用每一字符的位置信息以及与所述位置信息对应的频次信息,建立目标频繁模式树,在所述目标频繁模式树中对于存在至少两个位置信息的字符包括至少两个节点,每个节点对应一个位置信息;基于所述目标频繁模式树获取目标日志模板;使用所述目标日志模板对待处理日志进行处理。2.如权利要求1所述的方法,其特征在于,所述使用每一字符的位置信息以及与所述位置信息对应的频次信息,建立目标频繁模式树,包括:使用每一字符的位置信息以及与所述位置信息对应的频次信息,建立第一频繁模式树,其中,在所述第一频繁模式树中对于存在至少两个位置信息的字符包括至少两个节点,每个节点对应一个位置信息;获取所述第一频繁模式树中的第一节点,所述第一节点位于第一分支和第二分支,所述第一节点的上一节点位于所述第一分支、所述第二分支和第三分支,且所述第二分支和所述第三分支中包括对应同一字符的同一位置信息的节点;将所述第一节点拆分为位于所述第一分支的第二节点和位于第二分支的第三节点;将所述第二分支与所述第三分支中对应同一字符的同一位置信息的节点合并,以得到所述目标频繁模式树。3.如权利要求1所述的方法,其特征在于,所述使用每一字符的位置信息以及与所述位置信息对应的频次信息,建立目标频繁模式树,包括:使用每一字符的位置信息以及与所述位置信息对应的频次信息,建立第二频繁模式树,其中,在所述第二频繁模式树中对于存在至少两个位置信息的字符包括至少两个节点,每个节点对应一个位置信息;获取所述第二频繁模式树中的第四节点,所述第四节点包括多个叶子节点,且所述多个叶子节点对应的字符的位置信息一致;将所述多个叶子节点剪枝,以得到所述目标频繁模式树。4.如权利要求1至3中任一项所述的方法,其特征在于,所述基于所述目标频繁模式树获取目标日志模板,包括:获取所述目标频繁模式树中的每一节点对应的字符及参数信息;基于所述每一节点对应的字符及参数信息填充预设日志模板,以得到所述目标日志模板。5.如权利要求4所述的方法,其特征在于,所述获取日志集中每一字符的参数信息之前,所述方法还包括:获取多条日志,以及所述多条日志的标点符号信息;基于所述多条日志的标点符...

【专利技术属性】
技术研发人员:杨晓余立王刚高飞左一平
申请(专利权)人:中国移动通信集团有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1