System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 数据处理方法、装置及设备制造方法及图纸_技高网

数据处理方法、装置及设备制造方法及图纸

技术编号:41311058 阅读:1 留言:0更新日期:2024-05-13 14:54
本申请实施例提供一种数据处理方法、装置及设备,涉及大数据技术领域、金融科技领域或其他相关领域。该方法包括:获取数据处理请求,数据处理请求包括至少一个第一数据集的第一标识、以及每个第一标识对应的第一应用的标识;获取历史时段内、每个第一数据集对应的至少一个开始时刻和至少一个结束时刻;根据历史时段内、每个第一数据集对应的至少一个开始时刻和至少一个结束时刻,在至少一个第一数据集中确定至少一个目标数据集;确定每个目标数据集对应的至少一个开始时刻和至少一个结束时刻,并向预设设备发送至少一个目标数据集、以及每个目标数据集对应的至少一个开始时刻和至少一个结束时刻。提高了数据处理的灵活性。

【技术实现步骤摘要】

本申请实施例涉及大数据,尤其涉及一种数据处理方法、装置及设备


技术介绍

1、企业的监管部门可以对业务系统产生的多个业务数据进行监控,若业务数据存在异常,可以及时确认异常并处理。

2、可以将业务系统产生的多个业务数据进行处理,得到多个目标数据,并对多个目标业务数据进行监控。在相关技术中,可以通过如下方式进行数据处理:根据监控类型和数据类型,确定处理多个业务数据的至少一个应用、以及每个应用对应的上下游关系。根据每个应用对应的上下游关系,依次通过应用对多个业务数据进行处理,得到多个目标数据。并通过报送出口,将每个应用处理得到的中间数据、以及多个目标数据发送至对应的终端设备。终端设备可以显示多个目标数据,以使用户通过终端设备对多个业务数据进行监控。

3、在上述过程中,若处理数据的应用的数量较多,或者处理的业务数据数量较大,终端设备无法全面展示所有应用处理的数据。需要工作人员人工确认重点监控的多个目标数据,无法准确对多个目标数据进行监控,导致数据处理的灵活性较低。


技术实现思路

1、本申请实施例提供一种数据处理方法、装置及设备,用以解决数据处理的灵活性较低的问题。

2、第一方面,本申请实施例提供一种数据处理方法,包括:

3、获取数据处理请求,所述数据处理请求包括至少一个第一数据集的第一标识、以及每个第一标识对应的第一应用的标识;

4、获取历史时段内、每个第一数据集对应的至少一个开始时刻和至少一个结束时刻,所述开始时刻为通过所述第一应用开始处理所述第一数据集的时刻,所述结束时刻为通过所述第一应用结束处理所述第一数据集的时刻,所述开始时刻和所述结束时刻不在预设时段内;

5、根据所述历史时段内、每个第一数据集对应的至少一个开始时刻和至少一个结束时刻,在所述至少一个第一数据集中确定至少一个目标数据集;

6、确定每个目标数据集对应的至少一个开始时刻和至少一个结束时刻,并向预设设备发送所述至少一个目标数据集、以及每个目标数据集对应的至少一个开始时刻和至少一个结束时刻。

7、在一种可能的实施方式中,根据所述历史时段内、每个第一数据集对应的至少一个开始时刻和至少一个结束时刻,在所述至少一个第一数据集中确定至少一个目标数据集,包括:

8、按照单位时长将所述历史时段划分为多个待选子时段;

9、确定每个待选子时段中、每个第一数据集对应的开始时刻和结束时刻;

10、根据每个待选子时段中、每个第一数据集对应的开始时刻和结束时刻,确定所述至少一个目标数据集。

11、在一种可能的实施方式中,所述历史时段包括第一子时段,所述第一子时段在所述历史时段内,所述历史时段的结束时刻与所述第一子时段的结束时刻相同,所述历史时段对应的第一时长与所述第一子时段对应的第二时长的差值大于或等于预设时长;

12、根据每个待选子时段中、每个第一数据集对应的开始时刻和结束时刻,确定所述至少一个目标数据集,包括:

13、根据每个待选子时段中、每个第一数据集对应的开始时刻,确定每个第一数据集对应的第一最小时刻;

14、根据每个待选子时段中、每个第一数据集对应的开始时刻,确定每个第一数据集对应的第二最小时刻;

15、在所述历史时段中,将在所述第一子时段内的第一最小时刻,确定为所述第二最小时刻,以及将在所述第一子时段内的第一最大时刻,确定为所述第二最大时刻;

16、根据每个第一数据集对应的第一最小时刻、第一最大时刻、第二最小时刻和第二最大时刻,确定所述至少一个目标数据集。

17、在一种可能的实施方式中,针对任意一个第一数据集;根据每个子时段中,所述第一数据集对应的开始时刻,确定所述第一数据集对应的第一最小时刻,包括:

18、在每个待选子时段中,判断所述第一数据集对应的开始时刻是否为所述至少一个开始时刻中的最小时刻;

19、若是,则确定所述开始时刻为所述第一数据集对应的第一最小时刻。

20、在一种可能的实施方式中,针对任意一个第一数据集;根据每个待选子时段中,每个第一数据集对应的结束时刻确定每个第一数据集对应的第一最大时刻,包括:

21、在每个待选子时段中,判断所述第一数据集对应的结束时刻是否为所述至少一个结束时刻中的最大时刻;

22、若是,则确定所述结束时刻为所述第一数据集对应的第一最大时刻。

23、在一种可能的实施方式中,根据每个第一数据集对应的第一最小时刻、第一最大时刻、第二最小时刻和第二最大时刻,确定所述至少一个目标数据集,包括:

24、针对任意一个第一数据集,根据所述第一最小时刻和所述第一时长,确定第一概率,以及根据所述第一最大时刻和所述第一时长,确定第二概率;

25、根据所述第二最小时刻和所述第一时长,确定第三概率,以及根据所述第二最大时刻和所述第一时长,确定第四概率;

26、根据每个第一数据集对应第一概率、第二概率、第三概率和第四概率,确定所述至少一个目标数据集;

27、其中,所述第一概率为所述历史时段内,最早通过所述第一应用开始处理所述第一数据集的概率,所述第二概率为所述历史时段内,最晚通过所述第一应用结束处理所述第一数据集的概率,所述第三概率为所述第一子时段内,最早通过所述第一应用开始处理所述第一数据集的概率,所述第四概率为所述第一子时段内,最晚通过所述第一应用结束处理所述第一数据集的概率。

28、在一种可能的实施方式中,根据所述第一最小时刻和所述第一时长,确定第一概率,包括:

29、确定所述第一数据集对应的第一最小时刻的第一数量;

30、根据所述第一数量和所述第一时长,确定所述第一概率。

31、在一种可能的实施方式中,根据每个第一数据集对应第一概率、第二概率、第三概率和第四概率,确定所述至少一个目标数据集,包括:

32、针对任意一个第一数据集,根据所述第一数据集对应的第一概率和第三概率,确定所述第一数据集对应的历史最早概率,以及根据所述第一数据集对应的第二概率和第四概率,确定所述第一数据集对应的历史最晚概率;

33、根据每个第一数据集对应的历史最早概率,在所述至少一个第一数据集中确定至少一个第一待选数据集,以及根据每个第一数据集对应的历史最晚概率,在所述至少一个第一数据集中确定至少一个第二待选数据集;

34、确定所述至少一个目标数据集包括所述至少一个第一待选数据集和所述至少一个第二待选数据集。

35、在一种可能的实施方式中,根据每个第一数据集对应的历史最早概率,在所述至少一个第一数据集中确定至少一个第一待选数据集,包括:

36、确定所述至少一个第一数据集的总数量;

37、判断所述至少一个第一数据集的总数量是否大于或等于预设数量;

38、若是,则按照所述历史最早概率从大到小的顺序,对每个第一数据集进行排序本文档来自技高网...

【技术保护点】

1.一种数据处理方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,根据所述历史时段内、每个第一数据集对应的至少一个开始时刻和至少一个结束时刻,在所述至少一个第一数据集中确定至少一个目标数据集,包括:

3.根据权利要求2所述的方法,其特征在于,所述历史时段包括第一子时段,所述第一子时段在所述历史时段内,所述历史时段的结束时刻与所述第一子时段的结束时刻相同,所述历史时段对应的第一时长与所述第一子时段对应的第二时长的差值大于或等于预设时长;

4.根据权利要求3所述的方法,其特征在于,针对任意一个第一数据集;根据每个子时段中,所述第一数据集对应的开始时刻,确定所述第一数据集对应的第一最小时刻,包括:

5.根据权利要求3所述的方法,其特征在于,针对任意一个第一数据集;根据每个待选子时段中,每个第一数据集对应的结束时刻确定每个第一数据集对应的第一最大时刻,包括:

6.根据权利要求3-5任一项所述的方法,其特征在于,根据每个第一数据集对应的第一最小时刻、第一最大时刻、第二最小时刻和第二最大时刻,确定所述至少一个目标数据集,包括:

7.根据权利要求6所述的方法,其特征在于,根据所述第一最小时刻和所述第一时长,确定第一概率,包括:

8.根据权利要求6或7所述的方法,其特征在于,根据每个第一数据集对应第一概率、第二概率、第三概率和第四概率,确定所述至少一个目标数据集,包括:

9.根据权利要求8所述的方法,其特征在于,根据每个第一数据集对应的历史最早概率,在所述至少一个第一数据集中确定至少一个第一待选数据集,包括:

10.一种数据处理装置,其特征在于,所述装置包括:

11.一种数据处理设备,其特征在于,包括:

12.一种存储有计算机指令的非瞬时计算机可读存储介质,其特征在于,其中,所述计算机指令用于使计算机执行根据权利要求1至9中任一项所述的方法。

13.一种计算机程序产品,包括计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求1至9中任一项所述的方法。

...

【技术特征摘要】

1.一种数据处理方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,根据所述历史时段内、每个第一数据集对应的至少一个开始时刻和至少一个结束时刻,在所述至少一个第一数据集中确定至少一个目标数据集,包括:

3.根据权利要求2所述的方法,其特征在于,所述历史时段包括第一子时段,所述第一子时段在所述历史时段内,所述历史时段的结束时刻与所述第一子时段的结束时刻相同,所述历史时段对应的第一时长与所述第一子时段对应的第二时长的差值大于或等于预设时长;

4.根据权利要求3所述的方法,其特征在于,针对任意一个第一数据集;根据每个子时段中,所述第一数据集对应的开始时刻,确定所述第一数据集对应的第一最小时刻,包括:

5.根据权利要求3所述的方法,其特征在于,针对任意一个第一数据集;根据每个待选子时段中,每个第一数据集对应的结束时刻确定每个第一数据集对应的第一最大时刻,包括:

6.根据权利要求3-5任一项所述的方法,其特征在于,根据每个第一数据集对应的第...

【专利技术属性】
技术研发人员:梁顺利沈珏赵亚晴王学洋
申请(专利权)人:中国工商银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1