日志文件处理方法、装置、计算机设备及存储介质制造方法及图纸

本申请属于云监控中的异常监控领域，具体为日志监控，并公开了一种日志文件处理方法、装置、计算机设备及存储介质，该方法包括：获取应用程序产生的日志文件，识别所述日志文件对应的文件格式；确定识别到的文件格式对应的文件解析规则；根据确定的文件解析规则解析所述日志文件以得到统一编码规范文件，通过预设文本分析规则分析所述统一编码规范文件以获取日志字段；根据所述日志字段生成数据维度统计表，并将所述数据维度统计表与历史的数据维度统计表作比对以获取差异信息；根据所述差异信息生成告警信息，输出所述告警信息。由此提高了不同格式的日志文件的处理速度，并降低了开发人员的工作量。

【技术实现步骤摘要】
日志文件处理方法、装置、计算机设备及存储介质
本申请涉及互联网
，尤其涉及一种日志文件处理方法、装置、计算机设备及存储介质。
技术介绍
目前，互联网时代下各种应用程序均会产生日志文件，但日志文件的格式以及数据类型各式各样，面对不同类型的日志文件，由于格式不统一导致处理较为繁琐。同时新系统、跨环境也会存在多种不同文件格式或数据格式的日志文件，随着对日志文件中的数据进行处理，比如日志数据中的信息新增，需要新增字段信息，需要底层重新开放或重新解析等，均会导致日志文件处理较为繁琐。此外，由于业务变化较快，需要不断的修改数据处理逻辑，才能满足业务需求，也会给日志文件处理造成麻烦。因此，需要提供一种日志文件处理方法以解决上述问题。
技术实现思路
本申请提供了一种日志文件处理方法、装置、计算机设备及存储介质，旨在提高日志文件的处理速度，同时降低开发人员的工作量。本申请提供了一种日志文件处理方法，其包括：获取应用程序产生的日志文件，识别所述日志文件对应的文件格式；根据文件格式和文件解析规则之间预设的对应关系，确定识别到的文件格式对应的文件解析规则；根据确定的文件解析规则解析所述日志文件以得到统一编本文档来自技高网...

【技术保护点】
1.一种日志文件处理方法，其特征在于，包括：获取应用程序产生的日志文件，识别所述日志文件对应的文件格式；根据文件格式和文件解析规则之间预设的对应关系，确定识别到的文件格式对应的文件解析规则；根据确定的文件解析规则解析所述日志文件以得到统一编码规范文件，通过预设文本分析规则分析所述统一编码规范文件以获取日志字段；根据所述日志字段生成数据维度统计表，并将所述数据维度统计表与历史的数据维度统计表作比对以获取差异信息；根据所述差异信息生成告警信息，并输出所述告警信息。

【技术特征摘要】
1.一种日志文件处理方法，其特征在于，包括：获取应用程序产生的日志文件，识别所述日志文件对应的文件格式；根据文件格式和文件解析规则之间预设的对应关系，确定识别到的文件格式对应的文件解析规则；根据确定的文件解析规则解析所述日志文件以得到统一编码规范文件，通过预设文本分析规则分析所述统一编码规范文件以获取日志字段；根据所述日志字段生成数据维度统计表，并将所述数据维度统计表与历史的数据维度统计表作比对以获取差异信息；根据所述差异信息生成告警信息，并输出所述告警信息。2.根据权利要求1所述的日志文件处理方法，其特征在于，所述通过预设文本分析规则分析所述统一编码规范文件以获取日志字段，包括：通过文本分析模型分析所述统一编码规范文件以得到特殊字段和分隔符；根据所述特殊字段和分隔符对所述统一编码规范文件的文件内容进行分割以得到日志字段。3.根据权利要求2所述的日志文件处理方法，其特征在于，所述根据所述特殊字段和分隔符对所述统一编码规范文件的文件内容进行分割以得到日志字段之后，还包括：将所述特殊字段发送至分布式系统，以使所述分布式系统对所述特殊字段进行解析以获取所述特殊字段对应的特殊日志字段；以及接收所述分布式系统反馈的所述特殊日志字段作为所述日志字段。4.根据权利要求1所述的日志文件处理方法，其特征在于，所述识别所述日志文件对应的文件格式，包括：根据预设文件格式集合识别所述日志文件对应的文件格式。5.根据权利要求1所述的日志文件处理方法，其特征在于，所述识别所述日志文件对应的文件格式，包括：扫描...

【专利技术属性】
技术研发人员：陈健鹏，林林，
申请(专利权)人：平安科技深圳有限公司，
类型：发明
国别省市：广东,44