System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 数据处理方法及装置、电子设备、计算机可读存储介质制造方法及图纸_技高网

数据处理方法及装置、电子设备、计算机可读存储介质制造方法及图纸

技术编号:40590809 阅读:3 留言:0更新日期:2024-03-12 21:51
本公开提供了一种数据处理方法及装置、电子设备、计算机可读存储介质,该方法包括:获取待处理的目标数据推送任务的任务信息,任务信息包括租户标识和业务标识,租户标识用于表示目标租户,目标租户为发送待推送数据的任一租户,任务信息根据目标租户所发送的、与业务标识所表示的目标业务对应的待推送数据生成;根据租户标识和业务标识,获取第一待推送数据,目标数据集中包括第一待推送数据,目标数据集中包括租户标识和业务标识所对应的所有待推送数据;对第一待推送数据进行数据推送处理。根据本公开的实施例可以提升数据推送效率。

【技术实现步骤摘要】

本公开涉及计算机,特别涉及一种数据处理方法及装置、电子设备、计算机可读存储介质


技术介绍

1、webhook作为一个轻量的事件处理应用,在业务系统中将变得越来越有用,其中,webhook是应用给其他应用提供实时信息的一种方式,在基于webhook进行数据推送处理时,通常是数据一生成,webhook应用就可以在数据生成时立即将数据推送到预先配置的应用接口,即api接口处。

2、相关技术中在进行webhook数据推送处理时,一般是各个租户,即各个业务系统将待发送的业务数据直接发送至webhook应用,再由webhook应用将接收到的业务数据顺序发送至相应的应用接口。该类数据推送方法在业务复杂或者需要处理的数据量较大的场景下,往往存在推送效率低下的问题。


技术实现思路

1、本公开提供一种数据处理方法及装置、电子设备、计算机可读存储介质。

2、第一方面,本公开提供了一种数据处理方法,该数据处理方法包括:

3、获取待处理的目标数据推送任务的任务信息,其中,所述任务信息包括租户标识和业务标识,所述租户标识用于表示目标租户,所述目标租户为发送待推送数据的任一租户,所述任务信息根据所述目标租户所发送的、与所述业务标识所表示的目标业务对应的待推送数据生成;

4、根据所述租户标识和所述业务标识,获取第一待推送数据,其中,目标数据集中包括所述第一待推送数据,所述目标数据集中包括所述租户标识和所述业务标识所对应的所有待推送数据;

5、对所述第一待推送数据进行数据推送处理。

6、第二方面,本公开提供了一种数据处理装置,该数据处理装置包括:

7、任务获取单元,用于获取待处理的目标数据推送任务的任务信息,其中,所述任务信息包括租户标识和业务标识,所述租户标识用于表示目标租户,所述目标租户为发送待推送数据的任一租户,所述任务信息根据所述目标租户所发送的、与所述业务标识所表示的目标业务对应的待推送数据生成;

8、数据获取单元,用于根据所述租户标识和所述业务标识,获取第一待推送数据,其中,目标数据集中包括所述第一待推送数据,所述目标数据集中包括所述租户标识和所述业务标识所对应的所有待推送数据;

9、数据推送单元,用于对所述第一待推送数据进行数据推送处理。

10、第三方面,本公开提供了一种电子设备,该电子设备包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的一个或多个计算机程序,一个或多个所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行上述第一方面的数据处理方法。

11、第四方面,本公开提供了一种计算机可读存储介质,其上存储有计算机程序,其中,所述计算机程序在被处理器执行时实现第一方面的数据处理方法。

12、本公开所提供的实施例,区别于相关技术中直接获取各业务系统,即各租户发送的业务数据,并根据业务数据接收时间顺序推送各业务数据的处理方式,本公开通过获取待处理的目标数据推送任务的任务信息,基于该任务信息中的租户标识和业务标识,获取当前目标数据推送任务对应的目标数据集中的第一待推送数据,并对该第一待推送数据进行数据推送处理。

13、具体地,在本公开实施例中,并不是根据各业务数据的接收时间顺序对各业务数据进行数据推送处理,而是通过创建各待推送数据对应的数据推送任务,并通过获取数据推送任务的任务信息以对各数据推送任务进行调度的方式进行数据推送处理,由于各数据推送任务是根据待推送数据中的租户标识和业务标识生成的,因此,基于数据推送任务的任务信息进行数据推送处理,可以实现推送处理在租户以及业务上的隔离,避免因为单个租户和/或单个业务的待推送数据量较大而导致其他租户和/或其他业务的待推送数据的延迟推送,从而可以提升数据推送效率。

14、应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其他特征将通过以下的说明书而变得容易理解。

本文档来自技高网...

【技术保护点】

1.一种数据处理方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述方法应用于多个服务器中的任一服务器,n≥1;所述任务信息还包括目标推送类型;

3.根据权利要求2所述的方法,其特征在于,在所述目标推送类型为第二预设值的情况下,在执行所述对所述第一待推送数据进行数据推送处理的步骤之前,所述方法还包括:

4.根据权利要求1所述的方法,其特征在于,所述数据推送处理包括webhook数据推送处理;所述任务信息还包括推送地址信息;

5.根据权利要求1所述的方法,其特征在于,在对所述第一待推送数据进行数据推送处理之后,所述方法还包括:

6.根据权利要求5所述的方法,其特征在于,在对所述推送重试次数和目标异常重试次数进行自增加1处理之后,所述方法还包括:

7.根据权利要求1所述的方法,其特征在于,所述任务信息还包括目标推送类型;所述根据所述租户标识和所述业务标识,获取第一待推送数据,包括:

8.根据权利要求1所述的方法,其特征在于,在对所述第一待推送数据进行数据推送处理之后,所述方法还包括

9.一种数据处理装置,其特征在于,包括:

10.一种电子设备,其特征在于,包括:

11.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序在被处理器执行时实现如权利要求1-8中任一项所述的数据处理方法。

...

【技术特征摘要】

1.一种数据处理方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述方法应用于多个服务器中的任一服务器,n≥1;所述任务信息还包括目标推送类型;

3.根据权利要求2所述的方法,其特征在于,在所述目标推送类型为第二预设值的情况下,在执行所述对所述第一待推送数据进行数据推送处理的步骤之前,所述方法还包括:

4.根据权利要求1所述的方法,其特征在于,所述数据推送处理包括webhook数据推送处理;所述任务信息还包括推送地址信息;

5.根据权利要求1所述的方法,其特征在于,在对所述第一待推送数据进行数据推送处理之后,所述方法还包括:

6.根据权利要求5...

【专利技术属性】
技术研发人员:唐良泽李涛杨毅
申请(专利权)人:北京中关村科金技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1