执行任务的方法和系统技术方案

提供了一种执行任务的方法，所述方法包括：将任务划分为至少两个子任务；分别试运行划分得到的各个子任务；以及基于得到的试运行结果判断是否存在执行成本超过预定值的子任务，如果存在执行成本超过预定值的子任务则终止执行所述任务，否则继续执行所述任务。

【技术实现步骤摘要】
执行任务的方法和系统
本专利技术涉及数据处理领域，特别涉及一种执行任务的方法和系统。
技术介绍
在大数据平台的计算任务当中，经常会处理非常大规模的计算任务。当需要计算大规模的计算任务时系统通常会将计算任务分解成若干的阶段去执行。如果当用户经过很长时间的等待而执行到某个后面的阶段，而该后面的阶段对应的计算时间超长，或者该后面的阶段存在根本执行不完的情况时，会导致位于执行该后面的阶段的前面各阶段的执行，都白白浪费掉，浪费了用户等待前面所有的阶段都已经执行完所等待的时间，极大降低了用户的体验效果。
技术实现思路
本专利技术实施例提供了一种执行任务的方法和系统，该方法能够将大规模的计算任务分解成的各个阶段分别试运行一下，给出各自的用时情况，如果后面的某些阶段的计算代价过高，则在该任务正式的运行前警告用户，达到及时发现问题，节省用户等待时间的目的。根据本专利技术的一方面，提供了一种执行任务的方法，所述方法包括：将任务划分为至少两个子任务；分别试运行划分得到的各个子任务；以及基于得到的试运行结果判断是否存在执行成本超过预定值的子任务，如果存在执行成本超过预定值的子任务则终止执行所述任务，否则继续执行所述任务。此外，根据本专利技术的一个实施例，其中，所述将任务划分为至少两个子任务，包括：通过有向无环图模型将任务划分为多个子任务；其中，所述多个子任务对应于所述任务被执行的先后顺序。此外，根据本专利技术的一个实施例，其中，所述试运行划分得到的各个子任务，包括：从各个子任务中选择部分内容；运行所述部分内容得到对应的试运行结果，其中，所述试运行结果包括试运行所述部分内容所消耗的时间以及运行该所述部分内容所消耗的资源。此外，根据本专利技术的一个实施例，其中，所述判断是否存在执行成本超过预定值的子任务，包括：基于试运行结果统计各个所述子任务的总耗时或总资源需求中的至少一个；判断得到的各个所述子任务总耗时或总资源需求中至少一个是否大于各自对应的预定值。此外，根据本专利技术的一个实施例，所述方法还包括，当存在执行成本超过预定值的子任务时，生成并提供警告信息。根据本专利技术的另一方面，还提供了一种执行任务的系统，所述系统应用于多处理器平台中，所述系统包括多处理器和存储器，其中，存储器，用于存储用户指令和系统数据；多处理器，用于基于所述用户指令来执行如下步骤：将任务划分为至少两个子任务；分别试运行划分得到的各个子任务；以及基于得到的试运行结果判断是否存在执行成本超过预定值的子任务，如果存在执行成本超过预定值的子任务则终止执行所述任务，否则继续执行所述任务。此外，根据本专利技术的一个实施例，所述多处理器通过有向无环图模型将任务划分为多个子任务；其中，所述多个子任务对应于所述任务被执行的先后顺序。此外，根据本专利技术的一个实施例，其中，所述多处理器从各个子任务中选择部分内容；运行所述部分内容得到对应的试运行结果，其中，所述试运行结果包括试运行所述部分内容所消耗的时间以及运行该所述部分内容所消耗的资源。此外，根据本专利技术的一个实施例，其中，所述多处理器基于试运行结果统计各个所述子任务的总耗时或总资源需求中的至少一个；判断得到的各个所述子任务总耗时或总资源需求中至少一个是否大于各自对应的预定值。此外，根据本专利技术的一个实施例，其特征在于，所述系统还包括：告警器，用于当存在执行成本超过预定值的子任务时，生成并提供警告信息。通过本专利技术上述实施例，可以将任务划分为至少两个子任务，分别试运行划分得到的各个子任务，基于得到的试运行结果判断是否存在执行成本超过预定值的子任务，如果存在执行成本超过预定值的子任务则终止执行所述任务，否则继续执行所述任务。采用本专利技术，可以基于各个子任务试运行结果，给出各个子任务的执行成本，如果某个子任务执行成本代价过高，则在任务正式运行前警告用户，达到及时发现问题，节省用户的等待时间。附图说明为了更清楚地说明本专利技术实施例的技术方案，下面将对本专利技术实施例中所需要使用的附图作简单地介绍，显而易见地，下面所描述的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：图1是根据本专利技术实施例的一种应用环境示意图；图2是根据本专利技术实施例的一种执行任务的方法的流程图；图3是根据本专利技术实施例的一种计算机终端的结构框图；图4是根据本专利技术实施例的一种执行任务的系统的示意图。具体实施方式为了使本
的人员更好地理解本专利技术方案，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分的实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本专利技术保护的范围。需要说明的是，本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本专利技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。根据本专利技术实施例，提供了一种执行任务的方法，该方法可以用于如图1所示的环境中，该环境可以包括硬件环境和网络环境。在本实施例中，该方法可以应用于如图1所示的多个集群节点和终端构成的硬件环境中。如图1所示，该多个集群节点101中可以包括多个处理节点，该多个集群节点对外作为一个整体，用于处理从终端103发送过来的访问请求。具体地，多个集群节点101通过网络与终端103通过集群服务器105(或者称之为负载均衡服务器)进行连接，上述网络包括但不限于：广域网、城域网或局域网。需要说明的是，上述的多个集群节点可以为服务器侧的集群，也可以是客户端侧的集群，本专利技术对此不做限定。在本专利技术上述运行环境下，本专利技术提供了如图2所示的执行任务的方法的流程图。需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。如图2所示，该方法可以包括如下步骤：步骤S202，将任务划分为至少两个子任务；步骤S204，分别试运行划分得到的各个子任务；步骤S206，基于得到的试运行结果判断是否存在执行成本超过预定值的子任务，如果存在执行成本超过预定值的子任务则终止执行任务，否则继续执行任务。通过本专利技术上述实施例，可以将任务划分为至少两个子任务，分别试运行划分得到的各个子任务，基于得到的试运行结果判断是否存在执行成本超过预定值的子任务，如果存在执行成本超过预定值的子任务则终止执行任务，否则继续执行任务。采用本专利技术，可以基于各个子任务试运行结果，给出各个子任务的执行成本，如果某个子任务执行成本代价过高，则在任务正式运行前警告用户，达到及时发现问题，节省用户的等待时间。上述执行任务，是指执行数据处理任务，上述数据可以是模拟数据，如声音、图像，也可以本文档来自技高网...

【技术保护点】
一种执行任务的方法，其特征在于，所述方法包括：将任务划分为至少两个子任务；分别试运行划分得到的各个子任务；以及基于得到的试运行结果判断是否存在执行成本超过预定值的子任务，如果存在执行成本超过预定值的子任务则终止执行所述任务，否则继续执行所述任务。

【技术特征摘要】
1.一种执行任务的方法，其特征在于，所述方法包括：将任务划分为至少两个子任务；分别试运行划分得到的各个子任务；以及基于得到的试运行结果判断是否存在执行成本超过预定值的子任务，如果存在执行成本超过预定值的子任务则终止执行所述任务，否则继续执行所述任务。2.如权利要求1所述的执行任务的方法，其中，所述将任务划分为至少两个子任务，包括：通过有向无环图模型将任务划分为多个子任务；其中，所述多个子任务对应于所述任务被执行的先后顺序。3.如权利要求1所述的执行任务的方法，其中，所述试运行划分得到的各个子任务，包括：从各个子任务中选择部分内容；运行所述部分内容得到对应的试运行结果，其中，所述试运行结果包括试运行所述部分内容所消耗的时间以及运行该所述部分内容所消耗的资源。4.如权利要求1所述的执行任务的方法，其中，所述判断是否存在执行成本超过预定值的子任务，包括：基于试运行结果统计各个所述子任务的总耗时或总资源消耗中的至少一个；判断得到的各个所述子任务总耗时或总资源消耗中至少一个是否大于各自对应的预定值。5.如权利要求1所述的执行任务的方法，其特征在于，所述方法还包括，当存在执行成本超过预定值的子任务时，生成并提供警告信息。6.一种执行任务的系统，所...

【专利技术属性】
技术研发人员：李亚坤，
申请(专利权)人：联想北京有限公司，
类型：发明
国别省市：北京,11