System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 数据处理方法、装置、电子设备及存储介质制造方法及图纸_技高网

数据处理方法、装置、电子设备及存储介质制造方法及图纸

技术编号:40214389 阅读:5 留言:0更新日期:2024-02-02 22:22
本公开公开了一种数据处理方法、装置、电子设备及存储介质,该方法包括:监控目标服务的状态并采集目标服务的状态数据;以及利用N个预设时间窗口对采集到的状态数据进行统计,并根据数据统计结果获得目标服务的性能数据,其中,预设时间窗口依据预设更新策略更新其起始时间以实现预设时间窗口的滑动。利用本公开提供的技术方案可以在实现对服务的性能数据进行准确统计的同时,还可以减少资源消耗并且降低延迟。

【技术实现步骤摘要】

本公开涉及数据处理,尤其涉及一种数据处理方法、装置、电子设备及存储介质


技术介绍

1、随着网络技术的不断发展,越来越多的应用被开发以供用户使用。在开发应用的过程中,服务性能是很重要的考量因素。然而,对于应用本身而言,所有服务的性能数据都是透明的,即,应用是无法感知到自己的性能的。但是,性能好坏却又左右着应用本身提供服务的稳定性,因此,需要额外的方式去统计服务的性能数据。

2、目前,在相关技术中,主要通过采用多个线程对接收到的多个请求进行串行处理来统计服务的性能数据,这种方法需要进行加锁处理以避免使统计的性能数据产生偏差,然而这会导致产生额外的资源消耗并且产生较高的延迟。


技术实现思路

1、本公开提供了一种数据处理方法、装置、电子设备及存储介质,以至少解决现有技术中在统计服务的性能数据时产生额外的资源消耗、以及产生较高延迟的问题。

2、根据本公开实施例的第一方面,提供了一种数据处理方法,所述数据处理方法包括:

3、监控目标服务的状态并采集所述目标服务的状态数据;以及

4、利用n个预设时间窗口对采集到的所述状态数据进行统计,并根据数据统计结果获得所述目标服务的性能数据,其中,所述预设时间窗口依据预设更新策略更新其起始时间以实现所述预设时间窗口的滑动,n为等于或大于2的正整数。

5、在至少一实施例中,所述监控目标服务的状态并采集所述目标服务的状态数据包括:

6、在监控到所述目标服务被调用的情况下,记录所述目标服务被调用的起始时间、结束时间和所述目标服务被调用时长中的至少两种。

7、在至少一实施例中,所述目标服务被调用包括所述目标服务接收请求、所述目标服务响应所述请求、以及所述目标服务发送请求中的至少一种。

8、在至少一实施例中,所述利用n个预设时间窗口对采集到的所述状态数据进行统计包括:

9、判断记录的多个所述起始时间是否均在n个所述预设时间窗口的覆盖范围之内;

10、在判断出记录的多个所述起始时间均在n个所述预设时间窗口的覆盖范围之内的情况下,将与多个所述起始时间对应的多个所述请求分别分配到n个所述预设时间窗口内进行数据统计;

11、在判断出记录的所述起始时间在n个所述预设时间窗口的覆盖范围之外的情况下,从n个所述预设时间窗口中确定目标时间窗口,对所述目标时间窗口的起始时间进行更新,并且利用更新后的目标时间窗口对与所述起始时间对应的所述请求进行数据统计。

12、在至少一实施例中,所述从n个所述预设时间窗口中确定目标时间窗口包括:

13、对记录的所述起始时间与所述预设时间窗口的大小进行取整运算;

14、对取整运算结果与所述预设时间窗口的数量进行取模运算;

15、根据取模运算结果确定n个所述预设时间窗口中的所述目标时间窗口。

16、在至少一实施例中,所述利用n个预设时间窗口对采集到的所述状态数据进行统计包括:

17、将多个所述请求分别分配到n个所述预设时间窗口;

18、判断所述预设时间窗口的起始时间是否过期;

19、在判断出所述起始时间过期的情况下,保存所述预设时间窗口中的窗口内容,更新所述预设时间窗口的起始时间,并且利用更新后的所述预设时间窗口处理分配到所述预设时间窗口的请求。

20、在至少一实施例中,n个所述预设时间窗口的覆盖范围连续并且被循环利用,其中,第i个所述预设时间窗口的结束时间与第i+1个所述预设时间窗口的起始时间相同,i为1至n-1之间的正整数。

21、根据本公开实施例的第二方面,提供了一种数据处理装置,所述数据处理装置包括:

22、监控模块,其被配置为监控目标服务的状态并采集所述目标服务的状态数据;以及

23、数据处理模块,其被配置为利用n个预设时间窗口对采集到的所述状态数据进行统计,并根据数据统计结果获得所述目标服务的性能数据,其中,所述预设时间窗口依据预设更新策略更新其起始时间以实现所述预设时间窗口的滑动,n为等于或大于2的正整数。

24、根据本公开实施例的第三方面,提供了一种电子设备,所述电子设备包括:

25、存储器,其存储有指令;

26、处理器,其被配置为执行所述指令,以实现本公开实施例的第一方面中任一所述数据处理方法。

27、根据本公开实施例的第四方面,提供了一种计算机可读存储介质,当所述计算机程序被执行时能够实现本公开实施例的第一方面中任一所述数据处理方法。

28、本公开实施例提供的技术方案至少带来以下有益效果:

29、本公开通过利用预设时间窗口对采集到的目标服务的状态数据进行处理,这可以实现以低延迟的方式进行性能数据的统计的目的。另外,本公开通过利用预设更新策略对至少一个预设时间窗口的起始时间进行更新,这可以实现时间上的推进,而无需创建新的时间窗口,因而不仅可以准确地对目标服务的性能数据进行统计,也可以减少资源的消耗。

本文档来自技高网...

【技术保护点】

1.一种数据处理方法,其特征在于,包括:

2.根据权利要求1所述的数据处理方法,其特征在于,所述监控目标服务的状态并采集所述目标服务的状态数据包括:

3.根据权利要求2所述的数据处理方法,其特征在于,所述目标服务被调用包括所述目标服务接收请求、所述目标服务响应所述请求、以及所述目标服务发送请求中的至少一种。

4.根据权利要求3所述的数据处理方法,其特征在于,所述利用N个预设时间窗口对采集到的所述状态数据进行统计包括:

5.根据权利要求4所述的数据处理方法,其特征在于,所述从N个所述预设时间窗口中确定目标时间窗口包括:

6.根据权利要求3所述的数据处理方法,其特征在于,所述利用N个预设时间窗口对采集到的所述状态数据进行统计包括:

7.根据权利要求1-6任一项所述的数据处理方法,其特征在于,N个所述预设时间窗口的覆盖范围连续并且被循环利用,其中,第i个所述预设时间窗口的结束时间与第i+1个所述预设时间窗口的起始时间相同,i为1至N-1之间的正整数。

8.一种数据处理装置,其特征在于,包括:

>9.一种电子设备,其特征在于,包括:

10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被执行时能够实现如权利要求1-7中任一项所述的数据处理方法。

...

【技术特征摘要】

1.一种数据处理方法,其特征在于,包括:

2.根据权利要求1所述的数据处理方法,其特征在于,所述监控目标服务的状态并采集所述目标服务的状态数据包括:

3.根据权利要求2所述的数据处理方法,其特征在于,所述目标服务被调用包括所述目标服务接收请求、所述目标服务响应所述请求、以及所述目标服务发送请求中的至少一种。

4.根据权利要求3所述的数据处理方法,其特征在于,所述利用n个预设时间窗口对采集到的所述状态数据进行统计包括:

5.根据权利要求4所述的数据处理方法,其特征在于,所述从n个所述预设时间窗口中确定目标时间窗口包括:

6.根据...

【专利技术属性】
技术研发人员:顾悦黄岗周圣强
申请(专利权)人:苏州万店掌网络科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1