日志处理方法、装置、电子装置和存储介质制造方法及图纸

技术编号:32541390 阅读:29 留言:0更新日期:2022-03-05 11:38
本申请涉及一种日志处理方法、装置、电子装置和存储介质,其中,该日志处理方法,应用于分布式系统包括:获取多个服务器的日志信息;根据预设类别对所述日志信息进行分类,得到分类数据,所述预设类别至少包括操作对象、操作行为和操作权限中的一种;对所述分类数据添加类别标签,得到目标数据。通过本申请,解决了分布式系统的海量日志分析效率低的问题,提高了分布式系统的日志处理效率。分布式系统的日志处理效率。分布式系统的日志处理效率。

【技术实现步骤摘要】
日志处理方法、装置、电子装置和存储介质


[0001]本申请涉及数据处理领域,特别是涉及日志处理方法、装置、电子装置和存储介质。

技术介绍

[0002]在分布式系统下,海量日志的分析处理显得尤为重要,由于涉及到日志的分布式收集、海量存储、到实时分析计算以及最后的展示,是一项繁琐的系统工程。
[0003]在相关技术中,各个系统的服务日志散落在不同地方或将原始日志数据不进行处理直接送到日志管理中心,排查问题的难度很大,因此,如何快速有效地找到需要的信息变的尤为关键。
[0004]针对相关技术中存在分布式系统的海量日志分析效率低的问题,目前还没有提出有效的解决方案。

技术实现思路

[0005]在本实施例中提供了一种日志处理方法、装置、电子装置和存储介质,以解决相关技术中分布式系统的海量日志分析效率低的问题。
[0006]第一个方面,在本实施例中提供了一种日志处理方法,应用于分布式系统,包括:
[0007]获取多个服务器的日志信息;
[0008]根据预设类别对所述日志信息进行分类,得到分类数据,所述预设类别至少包括操作对象、操作行为和操作权限中的一种;
[0009]对所述分类数据添加类别标签,得到目标数据。
[0010]在其中的一个实施例中,所述类别标签为预定义注解。
[0011]在其中的一个实施例中,所述对所述分类数据添加类别标签,得到目标数据之后包括:将所述类别标签相同的所述目标数据存储至相同存储位置。
[0012]在其中的一个实施例中,所述对所述分类数据添加类别标签,得到目标数据之后包括:获取日志查询请求;基于所述日志查询请求获取参数信息,所述参数信息至少包括设备编号;将所述参数信息与响应所述日志查询请求的所述目标数据存储至相同存储位置。
[0013]在其中的一个实施例中,所述将所述参数信息与响应所述日志查询请求的所述目标数据存储至相同存储位置之后包括:根据所述参数信息以及响应所述日志查询请求的所述目标数据,确定所述参数信息对应设备的设备运行状态,所述设备运行状态包括故障状态和正常状态。
[0014]在其中的一个实施例中,所述对所述分类数据添加类别标签,得到目标数据之后还包括:基于目标数据获取设备温度参数;若所述设备温度参数达到报警阈值,则进行报警并存储报警记录。
[0015]在其中的一个实施例中,所述对所述分类数据添加类别标签,得到目标数据之后还包括;获取系统资源使用率;若所述系统资源使用率大于或等于第一阈值时,增加系统服
务器资源;若所述系统资源使用率小于第二阈值时,降低系统服务器资源;所述第一阈值大于所述第二阈值。
[0016]第二个方面,在本实施例中提供了一种日志处理装置,包括:
[0017]获取模块,用于获取多个服务器的日志信息;
[0018]分类模块,用于根据预设类别对所述日志信息进行分类,得到分类数据,所述预设类别至少包括操作对象、操作行为和操作权限中的一种;
[0019]处理模块,用于对所述分类数据添加类别标签,得到目标数据。
[0020]第三个方面,在本实施例中提供了一种电子装置,包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述第一个方面所述的日志处理方法。
[0021]第四个方面,在本实施例中提供了一种存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述第一个方面所述的日志处理方法。
[0022]与相关技术相比,在本实施例中提供的日志处理方法,通过获取多个服务器的日志信息;根据预设类别对所述日志信息进行分类,得到分类数据,所述预设类别至少包括操作对象、操作行为和操作权限中的一种;对所述分类数据添加类别标签,得到目标数据,解决了分布式系统的海量日志分析效率低的问题,提高了分布式系统的日志处理效率。
[0023]本申请的一个或多个实施例的细节在以下附图和描述中提出,以使本申请的其他特征、目的和优点更加简明易懂。
附图说明
[0024]此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
[0025]图1是根据本申请实施例的日志处理方法的终端的硬件结构框图;
[0026]图2是根据本申请实施例的日志处理方法的流程图;
[0027]图3是根据本申请实施例的日志处理装置的结构框图。
具体实施方式
[0028]为更清楚地理解本申请的目的、技术方案和优点,下面结合附图和实施例,对本申请进行了描述和说明。
[0029]除另作定义外,本申请所涉及的技术术语或者科学术语应具有本申请所属
具备一般技能的人所理解的一般含义。在本申请中的“一”、“一个”、“一种”、“该”、“这些”等类似的词并不表示数量上的限制,它们可以是单数或者复数。在本申请中所涉及的术语“包括”、“包含”、“具有”及其任何变体,其目的是涵盖不排他的包含;例如,包含一系列步骤或模块(单元)的过程、方法和系统、产品或设备并未限定于列出的步骤或模块(单元),而可包括未列出的步骤或模块(单元),或者可包括这些过程、方法、产品或设备固有的其他步骤或模块(单元)。在本申请中所涉及的“连接”、“相连”、“耦接”等类似的词语并不限定于物理的或机械连接,而可以包括电气连接,无论是直接连接还是间接连接。在本申请中所涉及的“多个”是指两个或两个以上。“和/或”描述关联对象的关联关系,表示可以存在三种关系,例如,“A和/或B”可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。通常情况下,
字符“/”表示前后关联的对象是一种“或”的关系。在本申请中所涉及的术语“第一”、“第二”、“第三”等,只是对相似对象进行区分,并不代表针对对象的特定排序。
[0030]在本实施例中提供的方法实施例可以在终端、计算机或者类似的运算装置中执行。比如在终端上运行,图1是根据本申请实施例的日志处理方法的终端的硬件结构框图。如图1所示,终端可以包括一个或多个(图1中仅示出一个)处理器102和用于存储数据的存储器104,其中,处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置。上述终端还可以包括用于通信功能的传输设备106以及输入输出设备108。本领域普通技术人员可以理解,图1所示的结构仅为示意,其并不对上述终端的结构造成限制。例如,终端还可包括比图1中所示更多或者更少的组件,或者具有与图1所示出的不同配置。
[0031]存储器104可用于存储计算机程序,例如,应用软件的软件程序以及模块,如在本实施例中的日志处理方法对应的计算机程序,处理器102通过运行存储在存储器104内的计算机程序,从而执行各种功能应用以及数据处理,即实现上述的方法。存储器104可包括高速随机存储器,还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种日志处理方法,应用于分布式系统,其特征在于,包括:获取多个服务器的日志信息;根据预设类别对所述日志信息进行分类,得到分类数据,所述预设类别至少包括操作对象、操作行为和操作权限中的一种;对所述分类数据添加类别标签,得到目标数据。2.根据权利要求1所述的日志处理方法,其特征在于,所述类别标签为预定义注解。3.根据权利要求1所述的日志处理方法,其特征在于,所述对所述分类数据添加类别标签,得到目标数据之后包括:将所述类别标签相同的所述目标数据存储至相同存储位置。4.根据权利要求1所述的日志处理方法,其特征在于,所述对所述分类数据添加类别标签,得到目标数据之后包括:获取日志查询请求;基于所述日志查询请求获取参数信息,所述参数信息至少包括设备编号;将所述参数信息与响应所述日志查询请求的所述目标数据存储至相同存储位置。5.根据权利要求4所述的日志处理方法,其特征在于,所述将所述参数信息与响应所述日志查询请求的所述目标数据存储至相同存储位置之后包括:根据所述参数信息以及响应所述日志查询请求的所述目标数据,确定所述参数信息对应设备的设备运行状态,所述设备运行状态包括故障状态和正常状态。6.根据权利要求1所述的日志...

【专利技术属性】
技术研发人员:李淼齐仲康姚杰孔伟阳张雷
申请(专利权)人:浙江中控技术股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1