System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 数据接入的方法和装置制造方法及图纸_技高网

数据接入的方法和装置制造方法及图纸

技术编号:41403962 阅读:2 留言:0更新日期:2024-05-20 19:29
本申请实施例提供了一种数据接入的方法和装置,其中,所述的方法包括:注册用于上报日志数据的中间件;通过所述中间件在接收到操作请求的情况下,根据所述操作请求获取初始日志数据;通过所述中间件根据所述初始日志数据确定需要填充的目标字段;通过所述中间件按照预设规则填充所述目标字段中的元数据信息得到操作日志数据,并将所述操作日志数据上报至日志管理系统。通过中间件自动确定接入方未填充的目标字段,然后填充并上报,使得操作日志数据可以方便且高效地接入到日志管理系统中,实现最大程度地降低操作日志数据的接入成本并降低对接入方原有系统的影响,从而提高接入数据的效率,并降低因接入数据导致的系统崩溃或数据丢失的风险。

【技术实现步骤摘要】

本申请实施例涉及互联网,尤其涉及一种数据接入的方法、装置、计算机设备及计算机可读存储介质。


技术介绍

1、操作日志主要用于记录公司运营、产品、研发等人员在管理后台上进行的人工操作,在责任追踪审计、数据统计分析等方面具有重要作用。公司内部存在着大量的管理后台,通常会有一个专用的系统以中间件服务的形式提供给不同部门业务方接入,以对操作日志进行统一存储、管理、分析等。然而,管理后台中存在各种类型的操作行为,每一个管理后台接入操作日志时都需要接入方编写操作相关的代码组装元数据信息,然后根据接口上报,并且每个操作都对应不同的元数据信息,这种接入方式对接入方存在增量的理解难度和开发负担,时间成本高。同时,存量的历史业务批量接入系统时,需要对服务进行大量的改动,效率极低且存在一定的服务变更风险。


技术实现思路

1、本申请实施例的目的是提供一种数据接入的方法、装置、计算机设备及计算机可读存储介质,用于解决以下问题:接入日志时需要为每个操作接口编写代码组装数据并调用接口上报,对接入方系统的服务进行大量的改动,不仅接入成本高且存在服务变更风险。

2、本申请实施例的一个方面提供了一种数据接入的方法,包括:

3、注册用于上报日志数据的中间件;

4、通过所述中间件在接收到操作请求的情况下,根据所述操作请求获取初始日志数据;

5、通过所述中间件根据所述初始日志数据确定需要填充的目标字段;

6、通过所述中间件按照预设规则填充所述目标字段中的元数据信息得到操作日志数据,并将所述操作日志数据上报至日志管理系统。

7、可选地,所述注册用于上报日志数据的中间件,包括:

8、向所述日志管理系统申请业务id;

9、根据所述业务id注册用于上报日志数据的中间件。

10、可选地,所述操作日志数据包含标识信息和操作信息;其中,所述标识信息包含日志id字段、业务id字段、操作人id字段和操作人姓名字段;所述操作信息包含操作时间字段、操作行为字段、操作相关信息字段、操作对象字段和操作结果字段。

11、可选地,所述目标字段为所述标识信息和操作信息中除了所述业务id字段之外的任意一个字段。

12、可选地,所述通过所述中间件按照预设规则填充所述目标字段中的元数据信息得到操作日志数据,包括:

13、当所述目标字段为日志id字段时,通过预置的uuid生成器自动生成日志id,以得到操作日志数据。

14、可选地,所述通过所述中间件按照预设规则填充所述目标字段中的元数据信息得到操作日志数据,包括:

15、当所述目标字段为操作人id字段和/或操作人姓名字段时,从所述操作请求对应的cookie数据中获取操作人id和/或操作人姓名,以得到操作日志数据。

16、可选地,所述通过所述中间件按照预设规则填充所述目标字段中的元数据信息得到操作日志数据,包括:

17、当所述目标字段为操作时间字段时,获取填充所述目标字段的当前时间作为操作时间,以得到操作日志数据;或,

18、当所述目标字段为操作行为字段时,获取所述操作请求对应的请求行和请求路径作为操作行为数据,以得到操作日志数据;或,

19、当所述目标字段为操作相关信息字段时,获取所述操作请求对应的请求体数据作为操作相关信息,以得到操作日志数据;或,

20、当所述目标字段为操作对象字段时,确定所述操作对象字段为空,以得到操作日志数据;或,

21、当所述目标字段为操作结果字段时,将执行所述操作请求对应的业务逻辑之后返回的结果作为操作结果数据,以得到操作日志数据。

22、本申请实施例的一个方面又提供了一种数据接入的装置,包括:

23、中间件注册模块,用于注册用于上报日志数据的中间件;

24、初始日志数据获取模块,用于通过所述中间件在接收到操作请求的情况下,根据所述操作请求获取初始日志数据;

25、目标字段确定模块,用于通过所述中间件根据所述初始日志数据确定需要填充的目标字段;

26、目标字段填充模块,用于通过所述中间件按照预设规则填充所述目标字段中的元数据信息得到操作日志数据,将所述操作日志数据上报至日志管理系统。

27、本申请实施例的一个方面又提供了一种计算机设备,所述计算机设备包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上述的数据接入的方法的步骤。

28、本申请实施例的一个方面又提供了一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序可被至少一个处理器所执行,以使所述至少一个处理器执行所述计算机程序时实现如上述的数据接入的方法的步骤。

29、本申请实施例的一个方面又提供了一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现如上述的数据接入的方法的步骤。

30、本申请实施例提供的数据接入的方法、装置、设备及计算机可读存储介质,通过自动确定接入方未填充的目标字段,按照预设规则填充目标字段中的元数据信息以得到操作日志数据并将上报至日志管理系统,使得操作日志数据可以方便且高效地接入到日志管理系统中,实现最大程度地降低操作日志数据的接入成本并降低对接入方原有系统的影响,从而提高接入数据的效率,有利于将存量的历史业务批量接入系统,不需要对服务进行大量的改动,降低因接入数据导致的系统崩溃或数据丢失的风险。

本文档来自技高网...

【技术保护点】

1.一种数据接入的方法,其特征在于,包括:

2.根据权利要求1所述的数据接入的方法,其特征在于,所述注册用于上报日志数据的中间件,包括:

3.根据权利要求1所述的数据接入的方法,其特征在于,所述操作日志数据包含标识信息和操作信息;其中,所述标识信息包含日志ID字段、业务ID字段、操作人ID字段和操作人姓名字段;所述操作信息包含操作时间字段、操作行为字段、操作相关信息字段、操作对象字段和操作结果字段。

4.根据权利要求3所述的数据接入的方法,其特征在于,所述目标字段为所述标识信息和操作信息中除了所述业务ID字段之外的任意一个字段。

5.根据权利要求3所述的数据接入的方法,其特征在于,所述通过所述中间件按照预设规则填充所述目标字段中的元数据信息得到操作日志数据,包括:

6.根据权利要求3所述的数据接入的方法,其特征在于,所述通过所述中间件按照预设规则填充所述目标字段中的元数据信息得到操作日志数据,包括:

7.根据权利要求3所述的数据接入的方法,其特征在于,所述通过所述中间件按照预设规则填充所述目标字段中的元数据信息得到操作日志数据,包括:

8.一种数据接入的装置,其特征在于,包括:

9.一种计算机设备,所述计算机设备包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时用于实现权利要求1至7中任意一项所述的数据接入的方法的步骤。

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序可被至少一个处理器所执行,以使所述至少一个处理器执行权利要求1至7中任意一项所述的数据接入的方法的步骤。

11.一种计算机程序产品,包括计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求1至7所述方法的步骤。

...

【技术特征摘要】

1.一种数据接入的方法,其特征在于,包括:

2.根据权利要求1所述的数据接入的方法,其特征在于,所述注册用于上报日志数据的中间件,包括:

3.根据权利要求1所述的数据接入的方法,其特征在于,所述操作日志数据包含标识信息和操作信息;其中,所述标识信息包含日志id字段、业务id字段、操作人id字段和操作人姓名字段;所述操作信息包含操作时间字段、操作行为字段、操作相关信息字段、操作对象字段和操作结果字段。

4.根据权利要求3所述的数据接入的方法,其特征在于,所述目标字段为所述标识信息和操作信息中除了所述业务id字段之外的任意一个字段。

5.根据权利要求3所述的数据接入的方法,其特征在于,所述通过所述中间件按照预设规则填充所述目标字段中的元数据信息得到操作日志数据,包括:

6.根据权利要求3所述的数据接入的方法,其特征在于,所述通过所述中间件按照预设规则填充...

【专利技术属性】
技术研发人员:曾小龙徐宁
申请(专利权)人:上海哔哩哔哩科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1