日志处理方法、装置、电子设备及介质制造方法及图纸

本申请提供一种日志处理方法、装置、电子设备及介质。该方法包括：接收日志信息，并将日志信息发送到消息队列；其中，消息队列汇集有多个日志信息用于进行消费；同一系统操作先后产生的至少两个日志信息对应同一异步标识；从消息队列获取待消费的目标日志信息，并查找与目标日志信息的异步标识相同的关联日志信息；根据关联日志信息，对目标日志信息进行填充操作，并存储填充后的目标日志信息。本申请的方法，有效缓解了日志数据的存储压力。有效缓解了日志数据的存储压力。有效缓解了日志数据的存储压力。

【技术实现步骤摘要】
日志处理方法、装置、电子设备及介质


[0001]本申请涉及云计算技术，尤其涉及一种日志处理方法、装置、电子设备及介质。

技术介绍

[0002]随着云计算产品的发展，对云中数据的访问和修改记录日志具有重要的意义，通过对日志进行数据挖掘，充分利用日志，可以为客户资源提供问题定位、资源跟踪、行为分析等方面的支撑。
[0003]目前，亟需一种可以缓解日志数据存储负担的日志收集系统，来应用于操作日志的收集。

技术实现思路

[0004]本申请提供一种日志处理方法、装置、电子设备及介质，用以缓解操作日志数据的存储压力。
[0005]一方面，本申请提供一种日志处理方法，应用于云平台的日志收集系统，所述方法包括：
[0006]接收日志信息，并将所述日志信息发送到消息队列；其中，所述消息队列汇集有多个日志信息用于进行消费；同一系统操作先后产生的至少两个日志信息对应同一异步标识；
[0007]从所述消息队列获取待消费的目标日志信息，并查找与所述目标日志信息的异步标识相同的关联日志信息；
[0008]根据所述关联本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种日志处理方法，其特征在于，应用于云平台的日志收集系统；所述方法包括：接收日志信息，并将所述日志信息发送到消息队列；其中，所述消息队列汇集有多个日志信息用于进行消费；同一系统操作先后产生的至少两个日志信息对应同一异步标识；从所述消息队列获取待消费的目标日志信息，并查找与所述目标日志信息的异步标识相同的关联日志信息；根据所述关联日志信息，对所述目标日志信息进行填充操作，并存储填充后的目标日志信息。2.根据权利要求1所述的方法，其特征在于，具有异步标识的日志信息还具有顺序标识，用于表示所述日志信息在同一所述系统操作产生的至少两个日志信息中的顺序；所述从所述消息队列获取待消费的目标日志信息，并查找与所述目标日志信息的异步标识相同的关联日志信息，包括：从所述消息队列获取待消费的目标日志信息，判断所述目标日志信息是否存在异步标识；若所述目标日志信息存在异步标识，则根据所述目标日志信息的顺序标识，确定所述目标日志信息是否为所述系统操作产生的第一个日志信息；若所述目标日志信息不是所述系统操作产生的第一个日志信息，则根据所述异步标识，查找所述目标日志信息的关联日志信息。3.根据权利要求2所述的方法，其特征在于，所述若所述目标日志信息不是所述系统操作产生的第一个日志信息，则根据所述异步标识，查找所述目标日志信息的关联日志信息，包括：根据所述异步标识，查找所述系统操作产生的第一个日志信息，作为所述关联日志信息；所述根据所述关联日志信息，对所述目标日志信息进行填充操作，包括：根据所述第一个日志信息包含的属性信息，对所述目标日志信息进行填充操作；其中，所述属性信息包括：操作来源、操作者、操作时间。4.根据权利要求3所述的方法，其特征在于，所述接收日志信息，并将所述日志信息发送到消息队列，包括：获取所述日志信息，根据所述日志信息的顺序标识，判断所述日志信息是否属于所述系统操作的第一个日志信息；若属于所述第一个日志信息，则校验所述日志信息是否包含所述系统操作的属性信息；若不属于所述第一个日志信息，则校验所述日志信息是否具有所述异步标识；在校验成功后，根据用户操作的主标识设置所述日志信息的子标识，并将所述日志信息发送到消息队列，每一个用户操作对应至少一个系统操作，每一个系统操作对应至少一个日...

【专利技术属性】
技术研发人员：樊媛媛，温源，姜辉，乔新亚，张青，陈腾腾，张兵兵，张凯，吴文杰，
申请(专利权)人：联通数字科技有限公司联通云数据有限公司，
类型：发明
国别省市：