日志数据处理方法及装置、存储介质及电子设备制造方法及图纸

本发明专利技术提供一种日志数据处理方法及装置、存储介质及电子设备，该方法包括：获取埋码的原始日志数据，将原始日志数据格式化为键值对数据；基于预设的各项配置表，获取键值对数据的标签数据，以及确定埋码的标准数据格式以及数据清洗信息；基于埋码的标准数据格式以及数据清洗信息对标签数据进行处理，得到满足标准数据格式的日志解析数据。通过使用配置表，提取出原始日志数据的标签数据，并且精确的配对埋码的标准数据格式以及数据清洗信息，基于标准数据格式以及数据清洗信息对标签数据进行清洗后，得到满足标准数据格式的日志解析数据，统一了日志解析数据的数据格式，降低系统对数据进行分析的难度，减少系统分析数据的出错率。错率。错率。

【技术实现步骤摘要】
日志数据处理方法及装置、存储介质及电子设备


[0001]本专利技术涉及日志处理
，特别涉及一种日志数据处理方法及装置、存储介质及电子设备。

技术介绍

[0002]日志数据是分析用户行为的基本依据，为了获取各种用户行为的日志数据，通常在软件产品各种设置各种埋码，从而使用埋码获得用户行为的日志数据。
[0003]软件产品通常由多个开发人员进行开发，不同的开发人员在埋码时配置的参数有所不同，使得同种类型的埋码会获取到多种数据格式的日志数据，数据格式不同的日志数据加大了分析系统分析数据的难度，分析系统极易出现分析出错的情况。

技术实现思路

[0004]有鉴于此，本专利技术提供一种日志数据处理方法及装置、存储介质及电子设备，通过使用配置表提取出埋码的原始日志数据的标签数据，并确定埋码的标准数据格式和数据清洗方式，基于标准数据格式和数据清洗方式对标签数据进行处理，可以得到满足标准数据格式的日志解析数据，从而实现了数据格式的统一，降低系统分析数据的难度，减少系统出错的情况。
[0005]为实现上述目的，本专利技术实施例提本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种日志数据处理方法，其特征在于，包括：获取埋码的原始日志数据；将所述原始日志数据格式化为键值对数据；基于预设的各项配置表，获取所述键值对数据的标签数据，以及确定所述埋码的标准数据格式以及数据清洗信息；基于所述埋码的标准数据格式以及数据清洗信息对所述标签数据进行处理，得到满足所述标准数据格式的日志解析数据。2.根据权利要求1所述的方法，其特征在于，所述将所述原始日志数据格式化为键值对数据，包括：采用预设的分隔符对所述原始日志数据进行切分，从所述原始日志数据中获取埋码名称和埋码内容；确定所述原始日志数据的数据类型，基于所述数据类型的数据转换方式对所述埋码名称和所述埋码内容进行转换，得到键值对数据。3.根据权利要求1所述的方法，其特征在于，所述基于预设的各项配置表，获取所述键值对数据的标签数据，以及确定所述埋码的标准数据格式以及数据清洗信息，包括：在各项所述配置表中确定标签配置表、数据格式配置表以及清洗方式配置表；基于所述标签配置表，确定所述键值对数据的标签名称和标签值，并将所述标签名称和所述标签值确定为所述键值对数据的标签数据；确定所述埋码的埋码类型，在所述数据格式配置表中确定与所述埋码类型对应的标准数据格式，并将该标准数据格式作为所述埋码的标准数据格式；基于所述清洗方式配置表确定所述埋码的清洗方式信息，并将所述清洗方式信息确定为所述埋码的数据清洗信息。4.根据权利要求3所述的方法，其特征在于，所述基于所述埋码的标准数据格式以及数据清洗信息对所述标签数据进行处理，得到满足所述标准数据格式的日志解析数据，包括：确定所述标签数据的数据格式与所述埋码的标准数据格式是否一致；若所述标签数据的数据格式与所述埋码的标准数据格式一致，则将所述标签数据作为满足所述标准数据格式的日志解析数据；若所述标签数据的数据格式与所述埋码的标准数据格式不一致，则基于所述数据清洗信息，对所述标签数据进行数据清洗，并将清洗得到的数据作为满足所述标准数据格式的日志解析数据。5.根据权利要求1所...

【专利技术属性】
技术研发人员：李岸青，
申请(专利权)人：北京搜房科技发展有限公司，
类型：发明
国别省市：