【技术实现步骤摘要】
本专利技术实施例涉及计算机领域，尤其涉及一种任务管理方法及装置。
技术介绍
1、随着存算分离架构的应用，越来越多的服务器中的计算资源和存储资源分布在不同的设备中。在执行计算任务时，具有计算资源的设备可能需要从具有存储资源的设备中读取输入数据，从而执行计算任务。然而，通过总线进行远距离传输，不可避免的会产生高额的数据传输时延，相应的，计算任务的执行效率也会降低。
技术实现思路
1、本专利技术实施例提供一种任务管理方法及装置，用于优化计算任务的调度方案，提高第一存储设备中存储资源的利用率，从而提高计算任务的执行效率。
2、第一方面，本专利技术实施例提供一种任务管理方法。该方法具体包括以下步骤：
3、获取计算设备的计算任务列表，计算任务列表中包含多个计算任务；当多个计算任务中存在至少一个第一计算任务组和至少一个第二计算任务组时，生成任务调度信息；其中，每个第一计算任务组中包含至少一个需要从第一存储设备读取输入数据的计算任务；每个第二计算任务组中包含至少一个不需要从第一存储设备读取输入数据的计算任务；第一调度信息用于指示多个计算任务的执行顺序；在执行顺序中执行时间相邻的两个第一计算任务组之间存在一个或多个第二计算任务组，和/或，执行时间相邻的两个第二计算任务组之间存在一个第一计算任务组。
4、采用该方法，根据计算任务组是否需要依赖输入数据来生成任务调度信息，优化了多个计算任务的执行顺序，提供了更多输入数据的获取时间，避免了在获取输入数据时用于执行计算任务
5、可选的，该计算任务列表可以是一个dag图。
6、可选的，计算任务组可以包括一个或多个计算任务。
7、可选的，多个计算任务组的执行时间最前的为第二计算任务组。
8、在一种可能的设计中，同一第一计算任务组中包含的计算任务需要从第一存储设备读取相同的输入数据。这样，对于同一个第一计算任务组，第一存储设备只需要获取到的一个输入数据可以用于同一个第一计算任务组中的多个计算任务，避免了由于同一个输入数据被逐出之后再次被获取，也就提高了任务执行的效率。
9、可选的，同一个第一计算任务组中的多个计算任务的执行顺序可以是预设的，也可以是随机确定的，本申请不做限定。
10、可选的，同一个第一计算任务组中的多个计算任务可以是并行执行的。
11、可选的，多个计算任务组的执行时间最前的为第二计算任务组。
12、在一种可能的设计中，该方法还包括：按照任务调度信息所指示的执行顺序，执行多个计算任务；或者，向计算设备发送任务调度信息。
13、可选的，多个计算任务中的多个计算任务可以是并行执行的。
14、在一种可能的设计中，执行多个计算任务，包括：执行多个计算任务中的目标计算任务后，从第一存储设备获取存储信息；存储信息用于指示第一存储设备当前存储的目标数据；根据目标数据更新任务调度信息；其中，更新后的任务调度信息用于指示多个计算任务中的剩余计算任务的执行顺序，剩余计算任务的执行顺序中执行时间最前的为剩余计算任务中的第三计算任务组；第三计算任务组中包含至少一个需要从第一存储设备读取目标数据作为输入数据的计算任务。这样，任务管理设备可以根据第一存储设备中当前存储的目标数据更新任务调度信息，充分利用存储资源，提高任务执行效率。
15、可选的，在执行每一个计算任务之后，从第一存储设备获取存储信息，并更新任务调度信息。
16、在一种可能的设计中，该方法还包括：从第二存储设备读取第一数据，并缓存到第一存储设备；或者，生成第二数据，并缓存到第一存储设备。
17、第二方面，本专利技术实施例提供另一种任务管理方法。该方法具体包括以下步骤：
18、获取计算设备的计算任务列表，计算任务列表中包含多个计算任务；当多个计算任务中存在多个第四计算任务时，生成任务调度信息；多个第四计算任务为需要从第一存储设备读取相同输入数据的计算任务；其中，任务调度信息用于指示多个计算任务的执行顺序；在执行顺序中多个第四计算任务的执行时间相邻。
19、第三方面，本申请实施例提供一种任务管理装置，包括获取模块和处理模块，其中，获取模块用于获取计算设备的计算任务列表，计算任务列表中包含多个计算任务；当多个计算任务中存在至少一个第一计算任务组和至少一个第二计算任务组时，该处理模块用于生成任务调度信息；其中，每个第一计算任务组中包含至少一个需要从第一存储设备读取输入数据的计算任务；每个第二计算任务组中包含至少一个不需要从第一存储设备读取输入数据的计算任务；第一调度信息用于指示多个计算任务的执行顺序；在执行顺序中执行时间相邻的两个第一计算任务组之间存在一个或多个第二计算任务组，和/或，执行时间相邻的两个第二计算任务组之间存在一个第一计算任务组。
20、可选的，该计算任务列表可以是一个dag图。
21、可选的，计算任务组可以包括一个或多个计算任务。
22、可选的，该处理模块还可以用于：确定计算任务组的执行时间最前的为第二计算任务组。
23、在一种可能的设计中，同一第一计算任务组中包含的计算任务需要从第一存储设备读取相同的输入数据。
24、可选的，同一个第一计算任务组中的多个计算任务的执行顺序可以是预设的，也可以是随机确定的，本申请不做限定。
25、可选的，同一个第一计算任务组中的多个计算任务可以是并行执行的。
26、可选的，该处理模块还可以用于：确定计算任务组的执行时间最前的为第二计算任务组。
27、在一种可能的设计中，该处理模块还用于：按照任务调度信息所指示的执行顺序，执行多个计算任务；或者，向计算设备发送任务调度信息。
28、可选的，多个计算任务中的多个计算任务可以是并行执行的。
29、在一种可能的设计中，该处理模块具体用于：执行多个计算任务中的目标计算任务后，从第一存储设备获取存储信息；存储信息用于指示第一存储设备当前存储的目标数据；根据目标数据更新任务调度信息；其中，更新后的任务调度信息用于指示多个计算任务中的剩余计算任务的执行顺序，剩余计算任务的执行顺序中执行时间最前的为剩余计算任务中的第三计算任务组；第三计算任务组中包含至少一个需要从第一存储设备读取目标数据作为输入数据的计算任务。
30、可选的，该处理模块具体用于：在执行每一个计算任务之后，从第一存储设备获取存储信息，并更新任务调度信息。
31、在一种可能的设计中，该获取模块还用于：从第二存储设备读取第一数据，并缓存到第一存储设备；或者，生成第二数据，并缓存到第一存储设备。
32、第四方面，本申请实施例提供另一种任务管理装置，包括获取模块和处理模块，其中，获取模块，用于获取计算设备的计算任务列表，计算任务列表中包含多个计算任务；当多个计算任务中存在多个第四计算任务时，该本文档来自技高网...
【技术保护点】
1.一种任务管理方法，其特征在于，所述方法包括：
2.如权利要求1所述的方法，其特征在于，
3.如权利要求1或2所述的方法，其特征在于，所述方法还包括：
4.如权利要求3所述的方法，其特征在于，执行所述多个计算任务，包括：
5.如权利要求1-4中任一项所述的方法，其特征在于，所述方法还包括：
6.一种任务管理方法，其特征在于，所述方法包括：
7.一种任务管理装置，其特征在于，所述装置包括：
8.如权利要求7所述的装置，其特征在于，
9.如权利要求7或8所述的装置，其特征在于，所述处理模块还用于：
10.如权利要求9所述的装置，其特征在于，所述处理模块具体用于：
11.如权利要求7-10中任一项所述的装置，其特征在于，所述获取模块还用于：
12.一种任务管理装置，其特征在于，所述装置包括：
13.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机可执行指令，所述计算机可执行指令在被所述计算机调用时，以执行如权利要求1-
14.一种芯片，其特征在于，所述芯片与存储器耦合，用于读取并执行所述存储器中存储的程序指令，以实现如权利要求1-5中任一项所述的方法，或者实现如权利要求6所述的方法。
...【技术特征摘要】
1.一种任务管理方法，其特征在于，所述方法包括：
2.如权利要求1所述的方法，其特征在于，
3.如权利要求1或2所述的方法，其特征在于，所述方法还包括：
4.如权利要求3所述的方法，其特征在于，执行所述多个计算任务，包括：
5.如权利要求1-4中任一项所述的方法，其特征在于，所述方法还包括：
6.一种任务管理方法，其特征在于，所述方法包括：
7.一种任务管理装置，其特征在于，所述装置包括：
8.如权利要求7所述的装置，其特征在于，
9.如权利要求7或8所述的装置，其特征在于，所述处理模块还用于：
10...
【专利技术属性】
技术研发人员：佟毓来，王成，
申请(专利权)人：华为云计算技术有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。