本公开提供了一种数据处理方法、装置、设备及存储介质，可以应用于计算机技术领域。该方法包括：响应于针对目标数据库的变更服务请求，通过拦截器获取待执行的第一数据变更指令信息和调用服务链路标识信息；根据第一数据变更指令信息和调用服务链路标识信息，生成第二数据变更指令信息；接收目标数据库的日志信息，其中，日志信息包括针对目标数据库，按照第二数据变更指令信息执行的数据变更操作信息；以及通过解析日志信息，将数据变更操作信息与调用服务链路标识信息进行关联存储。调用服务链路标识信息进行关联存储。调用服务链路标识信息进行关联存储。
【技术实现步骤摘要】
数据处理方法、装置、设备及存储介质
[0001]本公开涉及计算机
，尤其涉及一种数据处理方法、装置、设备、介质和程序产品。
技术介绍
[0002]在对业务系统中的操作数据进行监控和分析的场景中，传统的方法是通过监听数据库中记录的已变更的数据，通过数据库中的数据变更情况，由相关人员人工判断数据变更与业务操作之间的关系。
[0003]在实现本公开的专利技术构思的过程中，专利技术人发现，相关技术中数据库中的数据变更记录与业务操作数据的追踪记录之间的是相互独立的，由于需要依赖人工排查和判断才能得到数据变更与业务操作之间的关系，导致数据处理效率较低。
技术实现思路
[0004]鉴于上述问题，本公开提供了一种数据处理方法、装置、设备、介质和程序产品。
[0005]根据本公开的一个方面，提供了一种数据处理方法，包括：
[0006]响应于针对目标数据库的变更服务请求，通过拦截器获取待执行的第一数据变更指令信息和调用服务链路标识信息；
[0007]根据第一数据变更指令信息和调用服务链路标识信息，生成第二数据变更指令信息；
[0008]接收目标数据库的日志信息，其中，日志信息包括针对目标数据库，按照第二数据变更指令信息执行的数据变更操作信息；以及
[0009]通过解析日志信息，将数据变更操作信息与调用服务链路标识信息进行关联存储。
[0010]根据本公开的实施例，根据第一数据变更指令信息和调用服务链路标识信息，生成第二数据变更指令信息，包括：
[0011]根据第一数据变更指令信息，确定待变更的备注字段；
[0012]将调用服务链路标识信息按照预设格式变更第一查询字段信息中待变更的备注字段，生成第二数据变更指令信息。
[0013]根据本公开的实施例，通过解析日志信息，将数据变更操作信息与调用服务链路标识信息进行关联存储，包括：
[0014]解析日志信息，得到数据变更操作信息和调用服务链路标识信息，其中，数据变更操作信息包括数据变更操作的类型信息和数据变更操作的内容信息；
[0015]根据数据变更操作的类型信息，按照预设规则，将数据变更操作的内容信息与调用服务链路标识信息进行关联存储。
[0016]根据本公开的实施例，解析日志信息，得到数据变更操作信息和调用服务链路标识信息，包括：
[0017]利用正则表达式解析日志信息，得到目标字段的位置信息；
[0018]根据目标字段的位置信息，从日志信息中查询得到数据变更操作信息和调用服务链路标识信息。
[0019]根据本公开的实施例，利用正则表达式解析日志信息，得到目标字段的位置信息，包括：
[0020]采用单线程的方式，利用日志标识信息，从日志信息中确定待解析日志信息；
[0021]利用正则表达式解析待解析日志信息，得到目标字段的位置信息。
[0022]根据本公开的实施例，根据数据变更操作的类型信息，按照预设规则，将数据变更操作的内容信息与调用服务链路标识信息进行关联存储，包括：
[0023]根据数据变更操作的类型信息，按照预设规则，从数据变更操作的内容信息确定待存储的目标内容信息；
[0024]将待存储的目标内容信息与调用服务链路标识信息进行关联存储。
[0025]本公开的另一个方面提供了一种数据处理装置，包括：获取模块、生成模块、接收模块和存储模块。其中，获取模块，用于响应于针对目标数据库的变更服务请求，通过拦截器获取待执行的第一数据变更指令信息和调用服务链路标识信息。生成模块，用于根据第一数据变更指令信息和调用服务链路标识信息，生成第二数据变更指令信息。接收模块，用于接收目标数据库的日志信息，其中，日志信息包括针对目标数据库，按照第二数据变更指令信息执行的数据变更操作信息。存储模块，用于通过解析日志信息，将数据变更操作信息与调用服务链路标识信息进行关联存储。
[0026]根据本公开的实施例，生成模块包括第一确定单元和生成单元。其中，第一确定单元，用于根据第一数据变更指令信息，确定待变更的备注字段。生成单元，用于将调用服务链路标识信息按照预设格式变更第一查询字段信息中待变更的备注字段，生成第二数据变更指令信息。
[0027]根据本公开的实施例，存储模块包括解析子模块和存储子模块。其中，解析子模块用于解析日志信息，得到数据变更操作信息和调用服务链路标识信息，其中，数据变更操作信息包括数据变更操作的类型信息和数据变更操作的内容信息。存储子模块，用于根据数据变更操作的类型信息，按照预设规则，将数据变更操作的内容信息与调用服务链路标识信息进行关联存储。
[0028]根据本公开的实施例，解析子模块包括解析单元和查询单元。其中，解析单元，用于利用正则表达式解析日志信息，得到目标字段的位置信息。查询单元，用于根据目标字段的位置信息，从日志信息中查询得到数据变更操作信息和调用服务链路标识信息。
[0029]根据本公开的实施例，解析单元包括第一确定子单元和解析子单元。其中，第一确定子单元，用于采用单线程的方式，利用日志标识信息，从日志信息中确定待解析日志信息。解析子单元，用于利用正则表达式解析待解析日志信息，得到目标字段的位置信息。
[0030]根据本公开的实施例，存储子模块包括第二确定单元和存储单元。其中，第二确定单元，用于根据数据变更操作的类型信息，按照预设规则，从数据变更操作的内容信息确定待存储的目标内容信息。存储单元，用于将待存储的目标内容信息与调用服务链路标识信息进行关联存储。
[0031]本公开的另一个方面提供了一种电子设备，包括：一个或多个处理器；存储器，用
于存储一个或多个程序，其中，当所述一个或多个程序被所述一个或多个处理器执行时，使得一个或多个处理器执行上述方法。
[0032]本公开的另一个方面还提供了一种计算机可读存储介质，其上存储有可执行指令，该指令被处理器执行时使处理器执行上述方法。
[0033]本公开的另一个方面还提供了一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现上述方法。
[0034]根据本公开提供的数据处理方法、装置、设备、介质和程序产品，通过拦截器获取待执行的第一数据变更指令信息和调用服务链路标识信息，由于根据第一数据变更指令信息和调用服务链路标识信息，生成第二数据变更指令信息，从而将调用服务链路标识信息和数据变更指令信息关联起来，在按照第二数据变更指令信息执行数据变更操作时，可以通过解析目标数据库的日志信息，得到数据变更操作信息与调用服务链路标识信息的关联关系，并将数据变更操作信息与调用服务链路标识信息进行关联存储。因此，至少部分的解决了数据库中的数据变更记录与业务操作数据的追踪记录之间相互割裂，需要依赖人工排查和判断才能得到数据变更与业务操作之间的关系导致的数据处理效率低的问题，实现了在不侵入业务系统的情况下，将数据变更操作信息与业务操作的调用服务链路标识信息进行关联存储的技术效果。
附图说明
[003本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种数据处理方法，包括：响应于针对目标数据库的变更服务请求，通过拦截器获取待执行的第一数据变更指令信息和调用服务链路标识信息；根据所述第一数据变更指令信息和所述调用服务链路标识信息，生成第二数据变更指令信息；接收所述目标数据库的日志信息，其中，所述日志信息包括针对所述目标数据库，按照所述第二数据变更指令信息执行的数据变更操作信息；以及通过解析所述日志信息，将所述数据变更操作信息与所述调用服务链路标识信息进行关联存储。2.根据权利要求1所述的方法，其中，所述根据所述第一数据变更指令信息和所述调用服务链路标识信息，生成第二数据变更指令信息，包括：根据所述第一数据变更指令信息，确定待变更的备注字段；将所述调用服务链路标识信息按照预设格式变更所述第一查询字段信息中待变更的备注字段，生成所述第二数据变更指令信息。3.根据权利要求1所述的方法，其中，所述通过解析所述日志信息，将所述数据变更操作信息与所述调用服务链路标识信息进行关联存储，包括：解析所述日志信息，得到所述数据变更操作信息和所述调用服务链路标识信息，其中，所述数据变更操作信息包括数据变更操作的类型信息和数据变更操作的内容信息；根据所述数据变更操作的类型信息，按照预设规则，将所述数据变更操作的内容信息与所述调用服务链路标识信息进行关联存储。4.根据权利要求3所述的方法，其中，所述解析所述日志信息，得到所述数据变更操作信息和所述调用服务链路标识信息，包括：利用正则表达式解析所述日志信息，得到目标字段的位置信息；根据所述目标字段的位置信息，从所述日志信息中查询得到所述数据变更操作信息和所述调用服务链路标识信息。5.根据权利要求4所述的方法，其中，所述利用正则表达式解析所...
【专利技术属性】
技术研发人员：史贤伟，
申请(专利权)人：北京京东乾石科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。