一种任务分配方法、系统、设备以及介质技术方案

技术编号:31489179 阅读:15 留言:0更新日期:2021-12-18 12:25
本发明专利技术公开了一种任务分配方法,包括以下步骤:响应于接收到任务处理请求,根据待处理任务的类型确定所需的资源;获取集群内每一个节点中对应资源的利用率;判断每一个节点的对应资源的利用率是否均小于第一阈值;响应于均小于第一阈值,根据处理上一个任务的节点确定处理本次任务的节点。本发明专利技术还公开了一种系统、计算机设备以及可读存储介质。本发明专利技术提出的方案可以在资源占用较低时,集群各个节点轮询处理请求,避免因某些节点资源占用过高的情况,确保各个节点负载均衡。确保各个节点负载均衡。确保各个节点负载均衡。

【技术实现步骤摘要】
一种任务分配方法、系统、设备以及介质


[0001]本专利技术涉及服务器领域,具体涉及一种任务分配方法、系统、设备以及存储介质。

技术介绍

[0002]随着云计算和大数据技术在现代社会发展中的飞速发展,生产生活中所积累的生产资料数据也呈指数级增长,海量存储技术在互联网发展中越发成为不可或缺的一部分。而在分布式存储系统中,通常要处理大量的数据请求,而且有的数据请求后台算法比较复杂,会消耗很大的资源,如果所有请求都在一个入口或一个节点去处理则会对对应节点造成巨大压力,不利于集群数据的稳定性及请求效率。

技术实现思路

[0003]有鉴于此,为了克服上述问题的至少一个方面,本专利技术实施例提出一种任务分配方法,包括以下步骤:
[0004]响应于接收到任务处理请求,根据待处理任务的类型确定所需的资源;
[0005]获取集群内每一个节点中对应资源的利用率;
[0006]判断每一个节点的对应资源的利用率是否均小于第一阈值;
[0007]响应于利用率均小于第一阈值,根据处理上一个任务的节点确定处理本次任务的节点。
[0008]在一些实施例中,还包括:
[0009]响应于存在部分节点的对应资源的利用率大于第一阈值,从剩余的节点中选择对应资源利用率最低的节点作为处理本次任务的节点。
[0010]在一些实施例中,还包括:
[0011]响应于所有节点的对应资源的利用率大于第一阈值,根据所述任务处理请求确定所述待处理任务的优先级;
[0012]从所有节点中选择对应资源的利用率与所述优先级相对应的节点作为处理本次任务的节点。
[0013]在一些实施例中,还包括:
[0014]判断每一个节点的对应资源的利用率是否均大于第二阈值,所述第二阈值大于所述第一阈值;
[0015]响应于利用率均大于第二阈值,提示资源不足并告警上报。
[0016]在一些实施例中,还包括:
[0017]响应于存在部分节点的对应资源的利用率大于第一阈值且小于第二阈值,从所述部分节点中选择对应资源利用率最低的节点作为处理本次任务的节点。
[0018]基于同一专利技术构思,根据本专利技术的另一个方面,本专利技术的实施例还提供了一种任务分配系统,包括:
[0019]第一确定模块,配置为响应于接收到任务处理请求,根据待处理任务的类型确定
所需的资源;
[0020]获取模块,配置为获取集群内每一个节点中对应资源的利用率;
[0021]判断模块,配置为判断每一个节点的对应资源的利用率是否均小于第一阈值;
[0022]第二确定模块,配置为响应于均小于第一阈值,根据处理上一个任务的节点确定处理本次任务的节点。
[0023]在一些实施例中,还包括第三确定模块,配置为:
[0024]响应于存在部分节点的对应资源的利用率大于第一阈值,从剩余的节点中选择对应资源利用率最低的节点作为处理本次任务的节点。
[0025]在一些实施例中,所述第三确定模块还配置为:
[0026]响应于所有节点的对应资源的利用率大于第一阈值,根据所述任务处理请求确定所述待处理任务的优先级;
[0027]从所有节点中选择对应资源的利用率与所述优先级相对应的节点作为处理本次任务的节点。
[0028]基于同一专利技术构思,根据本专利技术的另一个方面,本专利技术的实施例还提供了一种计算机设备,包括:
[0029]至少一个处理器;以及
[0030]存储器,所述存储器存储有可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时执行以下步骤:
[0031]响应于接收到任务处理请求,根据待处理任务的类型确定所需的资源;
[0032]获取集群内每一个节点中对应资源的利用率;
[0033]判断每一个节点的对应资源的利用率是否均小于第一阈值;
[0034]响应于均小于第一阈值,根据处理上一个任务的节点确定处理本次任务的节点。
[0035]在一些实施例中,还包括:
[0036]响应于存在部分节点的对应资源的利用率大于第一阈值,从剩余的节点中选择对应资源利用率最低的节点作为处理本次任务的节点。
[0037]在一些实施例中,还包括:
[0038]响应于所有节点的对应资源的利用率大于第一阈值,根据所述任务处理请求确定所述待处理任务的优先级;
[0039]从所有节点中选择对应资源的利用率与所述优先级相对应的节点作为处理本次任务的节点。
[0040]在一些实施例中,还包括:
[0041]判断每一个节点的对应资源的利用率是否均大于第二阈值,所述第二阈值大于所述第一阈值;
[0042]响应于均大于第二阈值,提示资源不足并告警上报。
[0043]在一些实施例中,还包括:
[0044]响应于存在部分节点的对应资源的利用率大于第一阈值且小于第二阈值,从所述部分节点中选择对应资源利用率最低的节点作为处理本次任务的节点。
[0045]基于同一专利技术构思,根据本专利技术的另一个方面,本专利技术的实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理
器执行时执行以下步骤:
[0046]响应于接收到任务处理请求,根据待处理任务的类型确定所需的资源;
[0047]获取集群内每一个节点中对应资源的利用率;
[0048]判断每一个节点的对应资源的利用率是否均小于第一阈值;
[0049]响应于均小于第一阈值,根据处理上一个任务的节点确定处理本次任务的节点。
[0050]在一些实施例中,还包括:
[0051]响应于存在部分节点的对应资源的利用率大于第一阈值,从剩余的节点中选择对应资源利用率最低的节点作为处理本次任务的节点。
[0052]在一些实施例中,还包括:
[0053]响应于所有节点的对应资源的利用率大于第一阈值,根据所述任务处理请求确定所述待处理任务的优先级;
[0054]从所有节点中选择对应资源的利用率与所述优先级相对应的节点作为处理本次任务的节点。
[0055]在一些实施例中,还包括:
[0056]判断每一个节点的对应资源的利用率是否均大于第二阈值,所述第二阈值大于所述第一阈值;
[0057]响应于均大于第二阈值,提示资源不足并告警上报。
[0058]在一些实施例中,还包括:
[0059]响应于存在部分节点的对应资源的利用率大于第一阈值且小于第二阈值,从所述部分节点中选择对应资源利用率最低的节点作为处理本次任务的节点。
[0060]本专利技术具有以下有益技术效果之一:本专利技术提出的方案可以在资源占用较低时,集群各个节点轮询处理请求,避免因某些节点资源占用过高的情况,确保各个节点负载均衡。
附图说明
[0061]为了更清楚地说明本专利技术实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种任务分配方法,其特征在于,包括以下步骤:响应于接收到任务处理请求,根据待处理任务的类型确定所需的资源;获取集群内每一个节点中对应资源的利用率;判断每一个节点的对应资源的利用率是否均小于第一阈值;响应于利用率均小于第一阈值,根据处理上一个任务的节点确定处理本次任务的节点。2.如权利要求1所述的方法,其特征在于,还包括:响应于存在部分节点的对应资源的利用率大于第一阈值,从剩余的节点中选择对应资源利用率最低的节点作为处理本次任务的节点。3.如权利要求2所述的方法,其特征在在于,还包括:响应于所有节点的对应资源的利用率大于第一阈值,根据所述任务处理请求确定所述待处理任务的优先级;从所有节点中选择对应资源的利用率与所述优先级相对应的节点作为处理本次任务的节点。4.如权利要求1所述的方法,其特征在于,还包括:判断每一个节点的对应资源的利用率是否均大于第二阈值,所述第二阈值大于所述第一阈值;响应于利用率均大于第二阈值,提示资源不足并告警上报。5.如权利要求4所述的方法,其特征在于,还包括:响应于存在部分节点的对应资源的利用率大于第一阈值且小于第二阈值,从所述部分节点中选择对应资源利用率最低的节点作为处理本次任务的节点。6.一种任务分配系统,其特征在于,包括:第一确定模块,配置为响应于接收到任务处理...

【专利技术属性】
技术研发人员:赵晓青
申请(专利权)人:济南浪潮数据技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1