System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本说明书的多个实施例涉及信息,具体涉及一种分布式计算负载均衡方法及系统。
技术介绍
1、分布式计算是指将计算任务分解并在多个计算机(节点)上并行执行的过程。这些节点通过网络相互连接,并共同协作来完成一个或多个复杂的任务。分布式计算具并行处理、资源共享、容错性强、可扩展性高、存在异构性的特点。负载均衡是在分布式计算环境中将工作负载分配给不同的节点,以确保没有一个节点过载而其他节点空闲的情况发生。负载均衡对于保持系统的稳定性和响应性至关重要。负载均衡技术的目标是优化资源使用、最大化吞吐量、最小化响应时间,并避免任何节点过载任何。常见的负载均衡策略包括轮询(round robin)、最少连接(least connections)、基于权重(weighted)、地理位置(geolocation)、内容感知(content-based)。其中内容感知是根据请求的内容类型或特定参数将请求转发到特定节点。负载均衡在现代互联网应用和服务中非常常见,尤其是在需要高可用性和可扩展性的场景下,例如电子商务网站、社交媒体平台和在线游戏等。但目前的负载均衡技术在需要根据数据库查询结果进行逐条处理时,由于数据库查询结果的行数具有不确定行,导致具体计算量存在不可预测性,可能会导致节点过载的情况。因此需要对负载均衡技术进行改进。
技术实现思路
1、本说明书多个实施例描述了一种分布式计算负载均衡方法及系统。
2、第一方面,本说明书实施例提供了一种分布式计算负载均衡方法,包括步骤:
3、接收目
4、识别所述代码中的数据库查询语句,执行所述数据库查询语句,获得结果数据;
5、根据所述结果数据获得所述计算任务的预估负荷,所述预估负荷包括预估耗时、预估内存空间占用和预估cpu资源占用;
6、读取分布式计算节点的节点负荷,所述节点负荷包括当前排队等待预估时长、内存空间占用及cpu资源占用;
7、根据所述预估负荷及所述节点负荷,获得每个所述计算任务适配的全部分布式计算节点,以及所述计算任务的预估完成时刻;
8、根据预估完成时刻获得每个计算任务的指定分布式计算节点,使分布式计算节点完成被指定的全部计算任务的预估完成时刻的时间差最小。
9、第二方面,本说明书实施例提供了一种分布式计算负载均衡系统,包括:
10、接收模块,接收目标任务划分出的多个可并行执行的计算任务,读取所述计算任务的代码;
11、查询模块,识别所述代码中的数据库查询语句,执行所述数据库查询语句,获得结果数据;
12、预估模块,根据所述结果数据获得所述计算任务的预估负荷,所述预估负荷包括预估耗时、预估内存空间占用和预估cpu资源占用;
13、读取模块,读取分布式计算节点的节点负荷,所述节点负荷包括当前排队等待预估时长、内存空间占用及cpu资源占用;
14、适配模块,根据所述预估负荷及所述节点负荷,获得每个所述计算任务适配的全部分布式计算节点,以及所述计算任务的预估完成时刻;
15、指定模块,根据预估完成时刻获得每个计算任务的指定分布式计算节点,使所述目标任务对应的全部计算任务的预估完成时刻的时间差最小。
16、第三方面,本说明书实施例提供了电子设备,包括处理器以及存储器;
17、所述处理器与所述存储器相连;
18、所述存储器,用于存储可执行程序代码;
19、所述处理器通过读取所述存储器中存储的可执行程序代码来运行与所述可执行程序代码对应的程序,以用于执行上述任一方面所述的方法。
20、第四方面,本说明书实施例提供了计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述任一方面所述的方法。
21、第五方面,本说明书实施例提供了计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现上述任一方面所述的方法。
22、本说明书一些实施例提供的技术方案带来的有益效果至少包括:
23、在本说明书多个实施例中,提供的分布式计算负载均衡方法将计算任务中的数据库查询语句在指定的服务器上前置执行,从而能够根据结果数据的条数,相对更为准确的预估计算任务的预估负荷,进而帮助使分布式计算负载更为均衡的进行调度。通过读取分布式计算节点的节点负荷,结合计算任务的预估负荷,使分布式计算节点完成被指定的全部计算任务的预估完成时刻的时间差最小,从而能够使计算任务能够更快的进行融合,获得目标任务的结果,提高分布式计算的效率。在指定的服务器上将数据库查询语句前置执行,从而避免了分布式节点频繁的与服务器建立连接的情况,减轻了数据库压力,有助于提高数据库的执行效率。
24、本说明书多个实施例的其他特点和优点将会在下面的具体实施方式、附图中进一步揭示。
本文档来自技高网...【技术保护点】
1.一种分布式计算负载均衡方法,其特征在于,包括步骤:
2.根据权利要求1所述的一种分布式计算负载均衡方法,其特征在于,
3.根据权利要求2所述的一种分布式计算负载均衡方法,其特征在于,
4.根据权利要求3所述的一种分布式计算负载均衡方法,其特征在于,
5.根据权利要求1至4任一项所述的一种分布式计算负载均衡方法,其特征在于,
6.根据权利要求1至4任一项所述的一种分布式计算负载均衡方法,其特征在于,
7.一种分布式计算负载均衡系统,其特征在于,包括:
8.电子设备,其特征在于,包括处理器以及存储器;
9.计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-6任一项所述的方法。
10.计算机程序产品,包括计算机程序,其特征在于,该计算机程序被处理器执行时实现如权利要求1-6任一项所述的方法。
【技术特征摘要】
1.一种分布式计算负载均衡方法,其特征在于,包括步骤:
2.根据权利要求1所述的一种分布式计算负载均衡方法,其特征在于,
3.根据权利要求2所述的一种分布式计算负载均衡方法,其特征在于,
4.根据权利要求3所述的一种分布式计算负载均衡方法,其特征在于,
5.根据权利要求1至4任一项所述的一种分布式计算负载均衡方法,其特征在于,
6.根据权利要求1至4任一项所述的一种...
【专利技术属性】
技术研发人员:夏良标,温建梅,夏立乘,
申请(专利权)人:杭州鼎助电子有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。