日志数据处理方法、装置、电子设备及存储介质制造方法及图纸

本申请实施例公开了一种日志数据处理方法、装置、电子设备及存储介质，该方法包括：获取通过日志采集模块采集的系统日志数据；采用与所述系统日志数据所属的数据类型匹配的数据压缩方式，对所述系统日志数据进行数据压缩处理，得到目标日志数据。上述的日志数据处理方法、装置、电子设备及存储介质，能够减少日志数据的数据量，以减少日志数据占用的存储空间，且提高了对日志数据进行数据压缩的效果。且提高了对日志数据进行数据压缩的效果。且提高了对日志数据进行数据压缩的效果。

【技术实现步骤摘要】
日志数据处理方法、装置、电子设备及存储介质


[0001]本申请涉及数据处理
，具体涉及一种日志数据处理方法、装置、电子设备及存储介质。

技术介绍

[0002]日志数据指的是记录计算机系统产生的过程性事件记录数据，通过查看日志数据，可以了解到电子设备在什么时间、执行了什么具体操作，或者是电子设备在各个时间点对应的运行情况等。运维或研发人员通过查看日志数据经常可解决故障定位排查的问题。日志数据的数据量大，因此，如何有效减少日志数据占用的存储空间成了亟需解决的问题。

技术实现思路

[0003]本申请实施例公开了一种日志数据处理方法、装置、电子设备及存储介质，能够减少日志数据的数据量，以减少日志数据占用的存储空间，且提高了对日志数据进行数据压缩的效果。
[0004]本申请实施例公开了一种日志数据处理方法，包括：
[0005]获取通过日志采集模块采集的系统日志数据；
[0006]采用与所述系统日志数据所属的数据类型匹配的数据压缩方式，对所述系统日志数据进行数据压缩处理，得到目标日志数据。<br/>[0007]本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种日志数据处理方法，其特征在于，包括：获取通过日志采集模块采集的系统日志数据；采用与所述系统日志数据所属的数据类型匹配的数据压缩方式，对所述系统日志数据进行数据压缩处理，得到目标日志数据。2.根据权利要求1所述的方法，其特征在于，所述系统日志数据所属的数据类型包括高频字段数据类型，所述高频字段数据类型的系统日志数据为系统调用目标接口产生的日志数据；所述采用与所述系统日志数据所属的数据类型匹配的数据压缩方式，对所述系统日志数据进行数据压缩处理，得到目标日志数据，包括：对属于所述高频字段数据类型的所述系统日志数据进行编码处理，将所述系统日志数据中包含的接口字符串转化为目标字符，得到目标日志数据，其中，所述接口字符串用于表征系统调用的目标接口。3.根据权利要求2所述的方法，其特征在于，所述将所述系统日志数据中包含的接口字符串转化为目标字符，得到目标日志数据，包括：在数据协议表中查找与所述系统日志数据中包含的接口字符串对应的目标字符，并将所述系统日志中的所述接口字符串转化为所述目标字符，得到目标日志数据。4.根据权利要求3所述的方法，其特征在于，所述方法还包括：获取所述日志采集模块在第一时间段内采集的属于所述高频字段数据类型的系统日志数据；根据所述第一时间段内采集的属于所述高频字段数据类型的系统日志数据，统计满足高频调用条件的第一目标接口；生成与所述第一目标接口对应的第一目标字符，并将所述第一目标接口的第一接口字符串及对应的第一目标字符存储到所述数据协议表中。5.根据权利要求1所述的方法，其特征在于，所述系统日志数据所属的数据类型包括规律性数据类型，所述规律性数据类型的系统日志数据为系统重复执行同一操作行为产生的日志数据；所述采用与所述系统日志数据所属的数据类型匹配的数据压缩方式，对所述系统日志数据进行数据压缩处理，得到目标日志数据，包括：对...

【专利技术属性】
技术研发人员：郑树贤，崔英云，马亚光，兰希，张家豪，
申请(专利权)人：OPPO广东移动通信有限公司，
类型：发明
国别省市：