System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种负载均衡的方法、装置、存储介质及电子设备制造方法及图纸_技高网

一种负载均衡的方法、装置、存储介质及电子设备制造方法及图纸

技术编号:41379979 阅读:3 留言:0更新日期:2024-05-20 10:22
本申请提供了一种负载均衡的方法、装置、存储介质及电子设备,该方法应用于从多个节点中选定的分发节点,包括:通过对多个节点中每个节点的实时负载进行计算,确定执行报文处理任务的至少一个节点;基于至少一个节点中各个节点的实时负载,获取报文处理任务的任务分发比例;将报文处理任务按照所述任务分发比例添加至通信虚拟设备中各个节点对应的分发队列中,以便于各个节点从所述分发队列中读取待处理报文并处理得到中间报文,并将中间报文添加至通信虚拟设备的回收队列中;至少对从回收队列中读取的中间报文进行处理,获取目标报文,并向分发节点对应的网卡发送目标报文。本申请实施例可以合理利用系统资源,提升系统吞吐量。

【技术实现步骤摘要】

本申请涉及数据处理,具体而言,涉及一种负载均衡的方法、装置、存储介质及电子设备


技术介绍

1、随着业务的不断扩展,数据传输量快速增长,总部侧ipsec服务器负载日益繁重。

2、目前,在对安全网关的报文流量进行处理时,拷贝模块通过将报文流量从网卡拷贝到消息队列。包处理模块将所有的报文流量的包处理任务平摊至系统中的所有节点,之后节点轮询消息队列中的报文流量进入包处理流程。虽然该方法可以实现满足数据传输量较大时的处理需求,但是无法避免节点超负荷工作的问题。

3、因此,如何提供一种合理利用资源的负载均衡的方法的技术方案成为亟需解决的技术问题。


技术实现思路

1、本申请的一些实施例的目的在于提供一种负载均衡的方法、装置、存储介质及电子设备,通过本申请的实施例的技术方案可以在保证报文任务处理的安全性的同时提升系统的稳定性和处理效率,从而提升系统的吞吐性能。

2、第一方面,本申请的一些实施例提供了一种负载均衡的方法,应用于从多个节点中选定的分发节点,包括:通过对所述多个节点中每个节点的实时负载进行计算,确定执行报文处理任务的至少一个节点;基于所述至少一个节点中各个节点的实时负载,获取所述报文处理任务的任务分发比例;将所述报文处理任务按照所述任务分发比例添加至通信虚拟设备中所述各个节点对应的分发队列中,以便于所述各个节点从所述分发队列中读取待处理报文并进行处理得到中间报文,并将所述中间报文添加至所述通信虚拟设备的回收队列中;至少对从所述回收队列中读取的所述中间报文进行处理,获取目标报文,并向所述分发节点对应的网卡发送所述目标报文。

3、本申请的一些实施例的分发节点通过从多个节点中选择出至少一个节点,然后基于节点的实时负载确定任务分发比例,基于任务分发比例,通过通信虚拟设备为各个节点分配待处理报文,最终得到各个节点处理的中间报文后,再进行处理得到目标报文。本申请的实施例可以在保证报文任务处理的安全性的同时提升系统的稳定性和处理效率,从而提升系统的吞吐性能。

4、在一些实施例,所述对所述多个节点中每个节点的实时负载进行计算之前,所述方法还包括:接收所述网卡发送的中断指令;从所述网卡中读取所述报文处理任务,其中,所述报文处理任务中包括多条待处理报文。

5、本申请的一些实施例通过从网卡中读取报文处理任务,可以实现报文的有效接收。

6、在一些实施例,所述通过对所述多个节点中每个节点的实时负载进行计算,确定执行报文处理任务的至少一个节点,包括:对所述每个节点的实时负载进行计算,获取所述每个节点的利用率;将所述每个节点的利用率中未超过预设阈值的节点作为所述至少一个节点。

7、本申请的一些实施例通过计算得到的每个节点的利用率与预设阈值进行对比,得到至少一个节点,有效避免了节点超负荷工作的问题出现,提升了系统稳定性。

8、在一些实施例,所述基于所述至少一个节点中各个节点的实时负载,获取所述报文处理任务的任务分发比例,包括:对所述各个节点的实时负载进行计算,得到各个节点空闲率;将所述各个节点空闲率间的比例作为所述任务分发比例。

9、本申请的一些实施例通过各个节点空闲率确定任务分发比例,可以提升系统的稳定性和吞吐量,提升任务处理效率。

10、在一些实施例,在所述将所述报文处理任务按照所述任务分发比例添加至通信虚拟设备中所述各个节点对应的分发队列中之前,所述方法还包括:在所述报文处理任务不能按照所述任务分发比例进行整数任务分发的情况下,在所述报文处理任务中添加虚拟报文任务,以实现所述整数任务分发。

11、本申请的一些实施例通过确认任务不能整分的情况下,添加虚拟报文任务实现整分,确保任务的有序分配。

12、在一些实施例,所述至少一个节点中含有所述分发节点,所述方法包括:获取与所述任务分发比例对应的本地待处理报文任务,其中,所述本地待处理报文任务包括所述虚拟报文任务;对所述本地待处理报文任务进行处理,得到本地报文。

13、本申请的一些实施例将虚拟报文任务分发给分发节点进行本地处理,可以确保分发节点可以处理较少的任务,提升系统的吞吐量。

14、在一些实施例,所述至少对从所述回收队列中读取的所述中间报文进行处理,获取目标报文,包括:对所述中间报文和所述本地报文进行安全处理,得到所述目标报文。

15、在一些实施例,所述多个节点中一个节点绑定一个网卡;一个节点对应有一个分发队列和一个回收队列。

16、本申请的一些实施例可以提升报文的传输效率,降低资源消耗。

17、第二方面,本申请的一些实施例提供了一种负载均衡的装置,包括:应用于从多个节点中选定的分发节点,所述装置包括:确定模块,被配置为通过对所述多个节点中每个节点的实时负载进行计算,确定执行报文处理任务的至少一个节点;获取模块,被配置为基于所述至少一个节点中各个节点的实时负载,获取所述报文处理任务的任务分发比例;分发模块,被配置为将所述报文处理任务按照所述任务分发比例添加至通信虚拟设备中所述各个节点对应的分发队列中,以便于所述各个节点从所述分发队列中读取待处理报文并进行处理得到中间报文,并将所述中间报文添加至所述通信虚拟设备的回收队列中;处理模块,被配置为至少对从所述回收队列中读取的所述中间报文进行处理,获取目标报文,并向所述分发节点对应的网卡发送所述目标报文。

18、第三方面,本申请的一些实施例提供一种计算机可读存储介质,其上存储有计算机程序,所述程序被处理器执行时可实现如第一方面任一实施例所述的方法。

19、第四方面,本申请的一些实施例提供一种电子设备,包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,其中,所述处理器执行所述程序时可实现如第一方面任一实施例所述的方法。

20、第五方面,本申请的一些实施例提供一种计算机程序产品,所述的计算机程序产品包括计算机程序,其中,所述的计算机程序被处理器执行时可实现如第一方面任一实施例所述的方法。

本文档来自技高网...

【技术保护点】

1.一种负载均衡的方法,其特征在于,应用于从多个节点中选定的分发节点,所述方法包括:

2.如权利要求1所述的方法,其特征在于,所述对所述多个节点中每个节点的实时负载进行计算之前,所述方法还包括:

3.如权利要求1或2所述的方法,其特征在于,所述通过对所述多个节点中每个节点的实时负载进行计算,确定执行报文处理任务的至少一个节点,包括:

4.如权利要求1或2所述的方法,其特征在于,所述基于所述至少一个节点中各个节点的实时负载,获取所述报文处理任务的任务分发比例,包括:

5.如权利要求1或2所述的方法,其特征在于,在所述将所述报文处理任务按照所述任务分发比例添加至通信虚拟设备中所述各个节点对应的分发队列中之前,所述方法还包括:

6.如权利要求5所述的方法,其特征在于,所述至少一个节点中含有所述分发节点,所述方法包括:

7.如权利要求6所述的方法,其特征在于,所述至少对从所述回收队列中读取的所述中间报文进行处理,获取目标报文,包括:

8.如权利要求1或2所述的方法,其特征在于,所述多个节点中一个节点绑定一个网卡;一个节点对应有一个分发队列和一个回收队列。

9.一种负载均衡的装置,其特征在于,应用于从多个节点中选定的分发节点,所述装置包括:

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,其中,所述计算机程序被处理器运行时执行如权利要求1-8中任意一项权利要求所述的方法。

11.一种电子设备,其特征在于,包括存储器、处理器以及存储在所述存储器上并在所述处理器上运行的计算机程序,其中,所述计算机程序被所述处理器运行时执行如权利要求1-8中任意一项权利要求所述的方法。

12.一种计算机程序产品,其特征在于,所述的计算机程序产品包括计算机程序,其中,所述的计算机程序被处理器运行时执行如权利要求1-8中任意一项权利要求所述的方法。

...

【技术特征摘要】

1.一种负载均衡的方法,其特征在于,应用于从多个节点中选定的分发节点,所述方法包括:

2.如权利要求1所述的方法,其特征在于,所述对所述多个节点中每个节点的实时负载进行计算之前,所述方法还包括:

3.如权利要求1或2所述的方法,其特征在于,所述通过对所述多个节点中每个节点的实时负载进行计算,确定执行报文处理任务的至少一个节点,包括:

4.如权利要求1或2所述的方法,其特征在于,所述基于所述至少一个节点中各个节点的实时负载,获取所述报文处理任务的任务分发比例,包括:

5.如权利要求1或2所述的方法,其特征在于,在所述将所述报文处理任务按照所述任务分发比例添加至通信虚拟设备中所述各个节点对应的分发队列中之前,所述方法还包括:

6.如权利要求5所述的方法,其特征在于,所述至少一个节点中含有所述分发节点,所述方法包括:

7.如权利要求6所述的方法,其特征在于,所述至少对从所述回收...

【专利技术属性】
技术研发人员:范玉庆
申请(专利权)人:北京天融信网络安全技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1