任务调度方法、装置、计算设备及计算机可读存储介质制造方法及图纸

本说明书实施例提供任务调度方法、装置、计算设备及计算机可读存储介质，其中所述任务调度方法包括：监测所述至少两个任务计算节点中各任务计算节点对应的计算资源使用率；在第一类型计算节点中存在待重新调度任务的情况下，将所述待重新调度任务调度至所述第二类型计算节点，其中，所述第一类型计算节点为计算资源使用率大于等于第一使用率阈值的任务计算节点，所述第二类型计算节点为计算资源使用率小于所述第一使用率阈值的任务计算节点，所述待重新调度任务是指未处理的且需要重新分配任务计算节点的资源处理任务。将第一类型计算节点的待重新调度任务调度至第一类型计算节点，实现了对任务的动态调度，保证了任务计算节点正常运行。算节点正常运行。算节点正常运行。

【技术实现步骤摘要】
任务调度方法、装置、计算设备及计算机可读存储介质


[0001]本说明书实施例涉及计算机
，特别涉及一种任务调度方法。本说明书一个或者多个实施例同时涉及一种任务调度装置，一种计算设备，一种计算机可读存储介质，以及一种计算机程序。

技术介绍

[0002]随着计算机技术的不断发展，除了对图像信息进行采集以外，还可以对图像信息进行进一步地分析，从而获得图像中的信息。
[0003]为了保证图像分析处理的实时性，通常可同时设置多个计算节点，用于对可接收到的图像处理任务分别进行处理；然而，一个计算节点的任务处理资源存在上限，若超出上限，则影响对图像处理任务的实时处理，故需要对每个计算节点上的任务处理资源进行合理分配；当前，通常是在不同的计算节点上调度相同数量的任务的方式，实现对任务处理资源的分配；但在实际应用中，任务处理资源的使用程度会实时发生变化，导致资源无法充分利用。
[0004]因此，如何对图像处理资源进行合理调度成为本领域技术人员亟待解决的技术问题。

技术实现思路

[0005]有鉴于此，本说明书实施例提供了一种任务调度方法。本说明书一个或者多个实施例同时涉及一种任务调度装置，一种计算设备，一种计算机可读存储介质以及一种计算机程序，以解决现有技术中存在的技术缺陷。
[0006]根据本说明书实施例的第一方面，提供了一种任务调度方法，包括：
[0007]监测所述至少两个任务计算节点中各任务计算节点对应的计算资源使用率；
[0008]在第一类型计算节点中存在待重新调度任务的情况下，将所述待重新调度任务调度至第二类型计算节点，其中，所述第一类型计算节点为计算资源使用率大于等于第一使用率阈值的任务计算节点，所述第二类型计算节点为计算资源使用率小于所述第一使用率阈值的任务计算节点，所述待重新调度任务是指未处理的且需要重新分配任务计算节点的资源处理任务。
[0009]根据本说明书实施例的第二方面，提供了一种任务调度装置，包括：
[0010]监测模块，被配置为监测所述至少两个任务计算节点中各任务计算节点对应的计算资源使用率；
[0011]调度模块，被配置为在第一类型计算节点中存在待重新调度任务的情况下，将所述待重新调度任务调度至第二类型计算节点，其中，所述第一类型计算节点为计算资源使用率大于等于第一使用率阈值的任务计算节点，所述第二类型计算节点为计算资源使用率小于所述第一使用率阈值的任务计算节点，所述待重新调度任务是指未处理的且需要重新分配任务计算节点的资源处理任务。
[0012]根据本说明书实施例的第三方面，提供了一种计算设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机指令，所述处理器执行所述计算机指令时实现所述任务调度方法的步骤。
[0013]根据本说明书实施例的第四方面，提供了一种计算机可读存储介质，其存储有计算机指令，该计算机指令被处理器执行时实现所述任务调度方法的步骤。
[0014]根据本说明书实施例的第五方面，提供了一种计算机程序，其中，当所述计算机程序在计算机中执行时，令计算机执行上述任务调度方法的步骤。
[0015]本说明书提供的任务调度方法，监测所述至少两个任务计算节点中各任务计算节点对应的计算资源使用率；在第一类型计算节点中存在待重新调度任务的情况下，将所述待重新调度任务调度至第二类型计算节点，其中，所述第一类型计算节点为计算资源使用率大于等于第一使用率阈值的任务计算节点，所述第二类型计算节点为计算资源使用率小于所述第一使用率阈值的任务计算节点，所述待重新调度任务是指未处理的且需要重新分配任务计算节点的资源处理任务。
[0016]本说明书一实施例实现了对任务的动态调度，通过监测任务计算节点的计算资源使用率，实现了对任务计算节点的资源消耗情况的监测；基于第一使用率阈值确定任务计算节点的类型，从而确定了存在处理需求的任务计算节点；在确定第一类型计算节点存在待重新调度任务的情况下，对待重新调度任务调度至第二类型计算节点，实现了对任务的动态调度，减轻了第一类型计算节点的计算负载，保证任务计算节点的正常运行。
附图说明
[0017]图1是本说明书一个实施例提供的一种一种任务调度方法应用于分布式集群系统的系统结构示意图；
[0018]图2示出了根据本说明书一个实施例提供的一种任务处理方法的流程图；
[0019]图3是本说明书一个实施例提供的一种任务调度方法的处理过程流程图；
[0020]图4是本说明书一个实施例提供的一种任务调度装置的结构示意图；
[0021]图5是本说明书一个实施例提供的一种计算设备的结构框图。
具体实施方式
[0022]在下面的描述中阐述了很多具体细节以便于充分理解本说明书。但是本说明书能够以很多不同于在此描述的其它方式来实施，本领域技术人员可以在不违背本说明书内涵的情况下做类似推广，因此本说明书不受下面公开的具体实施的限制。
[0023]在本说明书一个或多个实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本说明书一个或多个实施例。在本说明书一个或多个实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本说明书一个或多个实施例中使用的术语“和/或”是指包含一个或多个相关联的列出项目的任何或所有可能组合。
[0024]应当理解，尽管在本说明书一个或多个实施例中可能采用术语第一、第二等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本说明书一个或多个实施例范围的情况下，第一也可以被称为第二，类
似地，第二也可以被称为第一。取决于语境，如在此所使用的词语“如果”可以被解释成为“在
……
时”或“当
……
时”或“响应于确定”。
[0025]首先，对本说明书一个或多个实施例涉及的名词术语进行解释。
[0026]视频计算任务：是将采集设备(如摄像头等)采集的视频流输入到运行于计算节点上的视频计算算法，计算输出得到相关的结构化信息(如视频中行人、机动车、非机动车等目标的特征、属性等)。
[0027]计算节点：是视频计算任务运行的载体，拥有一定规格的计算资源，可以是物理服务器，也可以是虚拟机，也可以是容器。一个计算节点n上通常可以运行一个或者多个不同类型的算法的一个或多个计算任务。
[0028]计算资源：完成视频计算任务所需要的计算资源，通常主要包含中央处理器(central processing unit，简称CPU)主频与核心数量、内存大小、硬盘空间大小、图形处理器(GPU：graphics processing unit，简称GPU)显存大小。
[0029]任务调度：是将多个视频流计算任务，分配在多个计算节点上运行的过程。
[0030]机器学习模型：机器学习模型是一种算法的表达，它通过梳理海量数据来查找模本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种任务调度方法，应用于分布式服务集群中的中心计算节点，所述分布式服务集群包括中心计算节点和至少两个任务计算节点，所述方法包括：监测所述至少两个任务计算节点中各任务计算节点对应的计算资源使用率；在第一类型计算节点中存在待重新调度任务的情况下，将所述待重新调度任务调度至第二类型计算节点，其中，所述第一类型计算节点为计算资源使用率大于等于第一使用率阈值的任务计算节点，所述第二类型计算节点为计算资源使用率小于所述第一使用率阈值的任务计算节点，所述待重新调度任务是指未处理的且需要重新分配任务计算节点的资源处理任务。2.如权利要求1所述的方法，将所述待重新调度任务调度至第二类型计算节点，包括：获取所述待重新调度任务的预测待调度资源使用量；基于所述预测待调度资源使用量在第二类型计算节点中确定目标第二类型计算节点；将所述待重新调度任务调度至所述目标第二类型计算节点。3.如权利要求1所述的方法，所述方法还包括：确定计算资源使用率小于等于第二使用率阈值的第二类型计算节点为闲时计算节点，确定计算资源使用率大于第二使用率阈值的第二类型计算节点为正常计算节点，其中，所述第一使用率阈值大于所述第二使用率阈值；将所述闲时计算节点中的资源处理任务调度至所述正常计算节点，或，向所述闲时计算节点中调度新的资源处理任务。4.如权利要求3所述的方法，将所述闲时计算节点中的资源处理任务调度至所述正常计算节点，包括：确定所述闲时计算节点中资源处理任务的资源处理任务类型；获取所述资源处理任务类型对应的当前节点数量和预测节点数量；在所述预测节点数量小于所述当前节点数量的情况下，基于所述待重新调度任务在所述正常计算节点中确定目标正常计算节点；将所述待重新调度任务调度至所述目标正常计算节点。5.如权利要求1所述的方法，监测所述至少两个任务计算节点对应的计算资源使用率之前，还包括：接收任务调度请求，其中，所述任务调度请求中包含资源处理任务列表，所述资源处理任务包括资源处理任务类型，所述资源处理任务包括视频计算任务；确定所述分布式服务集群中的任务计算节点集合；根据所述资源处理任务类型将所述资源处理任务列表中的资源处理任务调度至所述任务计算节点集合中的至少一个任务计算节点。6.如权利要求5所述的方法，根据所述资源处理任务类型将所述资源处理任务列表中的资源处理任务调度至所述任务计算节点集合中的至少一个任务计算节点，包括：根据目标资源处理任务类型在所述资源处理任务列表中确定资源处理任务子集合；根据所述资源处理任务子集合的任务数量为所述目标资源...

【专利技术属性】
技术研发人员：毛霆，申晨，肖征东，呼思乐，姜海曙，周昌，黄建强，
申请(专利权)人：阿里巴巴中国有限公司，
类型：发明
国别省市：