业务线的任务资源消耗分摊方法、装置、设备和存储介质制造方法及图纸

本发明专利技术涉及一种业务线的任务资源消耗分摊方法、装置、设备和存储介质，该方法包括：获取各个任务之间的依赖关系以及各个任务的固有资源消耗数据，各个任务分为根任务、子任务和叶子任务，子任务分为第一子任务和第二子任务，第一子任务包括根任务的子任务，第二子任务包括子任务中除第一子任务的其他子任务；若检测到叶子任务的调度操作，则根据依赖关系和固有资源消耗数据计算各个叶子任务的分摊资源消耗数据，叶子任务为没有后继任务的任务；确定各个叶子任务的分摊资源消耗数据为对应的业务线目标资源消耗数据并进行存储。统计出了各个业务线消耗大数据计算资源的占用情况，为大数据计算资源分配优化和业务线成本投入提供数据支撑和决策。

【技术实现步骤摘要】
业务线的任务资源消耗分摊方法、装置、设备和存储介质
本专利技术涉及资源分配和优化
，具体涉及一种业务线的任务资源消耗分摊方法、装置、设备和存储介质。
技术介绍
统计各个业务线占用大数据计算资源对于资源分配优化和业务线成本投入决策具有重要的指导意义。而相关技术中，缺少统计各个业务线占用大数据计算资源的方案，这样导致大数据计算资源分配优化和业务线成本投入决策不完善。
技术实现思路
有鉴于此，提供一种业务线的任务资源消耗分摊方法、装置、设备和存储介质，以解决相关技术中大数据计算资源分配优化和业务线成本投入决策不完善的问题。本专利技术采用如下技术方案：第一方面，本申请实施例提供了一种业务线的任务资源消耗分摊方法，该方法包括：获取各个任务之间的依赖关系以及各个任务的固有资源消耗数据，其中，各个任务分为根任务、子任务和叶子任务，所述子任务分为第一子任务和第二子任务，所述第一子任务包括根任务的子任务，所述第二子任务包括所述子任务中除所述第一子任务的其他子任务；若检测到叶子任务的调度操作，则根据所述依赖关系和所述固有资源消耗数据计算各个叶子任务的分摊资源消耗数据，其中，所述叶子任务为没有后继任务的任务；确定所述各个叶子任务的分摊资源消耗数据为对应的业务线目标资源消耗数据并进行存储。第二方面，本申请实施例提供了一种业务线的任务资源消耗分摊装置，该装置包括：获取模块，用于获取各个任务之间的依赖关系以及各个任务的固有资源消耗数据，其中，各个任务分为根任务、子任务和叶子任务，所述子任务分为第一子任务和第二子任务，所述第一子任务包括根任务的子任务，所述第二子任务包括所述子任务中除所述第一子任务的其他子任务；分摊资源消耗数据计算模块，用于在检测到叶子任务的调度操作时，根据所述依赖关系和所述固有资源消耗数据计算各个叶子任务的分摊资源消耗数据，其中，所述叶子任务为没有后继任务的任务；目标资源消耗数据确定模块，用于确定所述各个叶子任务的分摊资源消耗数据为对应的业务线目标资源消耗数据并进行存储。第三方面，本申请实施例提供了一种设备，该设备包括：处理器，以及与所述处理器相连接的存储器；所述存储器用于存储计算机程序，所述计算机程序至少用于执行本申请实施例第一方面所述的业务线的任务资源消耗分摊方法；所述处理器用于调用并执行所述存储器中的所述计算机程序。第四方面，本申请实施例提供了一种存储介质，所述存储介质存储有计算机程序，所述计算机程序被处理器执行时，实现如第一方面所述的业务线的任务资源消耗分摊方法中各个步骤。本专利技术采用以上技术方案，通过任务工作流中每个任务的计算资源消耗量的层层分摊，直到叶子任务，最后计算出各个业务线的资源消耗数据，有效的统计出了各个业务线消耗大数据计算资源的占用情况，为大数据计算资源分配优化和业务线成本投入提供数据支撑和决策。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1是本专利技术实施例提供的一种业务线的任务资源消耗分摊方法的流程图；图2是本专利技术实施例中适用的一种系统架构图；图3是本专利技术实施例中适用的一种分摊原理示意图；图4是本专利技术实施例提供的一种业务线的任务资源消耗分摊装置的结构示意图；图5是本专利技术实施例提供的一种设备的结构示意图。具体实施方式为使本专利技术的目的、技术方案和优点更加清楚，下面将对本专利技术的技术方案进行详细的描述。显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所得到的所有其它实施方式，都属于本专利技术所保护的范围。实施例图1为本专利技术实施例提供的一种实施例提供的一种业务线的任务资源消耗分摊方法的流程图，该方法可以由本专利技术实施例提供的业务线的任务资源消耗分摊方法装置来执行，该装置可采用软件和/或硬件的方式实现。参考图1，该方法具体可以包括如下步骤：S101、获取各个任务之间的依赖关系以及各个任务的固有资源消耗数据，其中，各个任务分为根任务、子任务和叶子任务，子任务分为第一子任务和第二子任务，第一子任务包括根任务的子任务，第二子任务包括子任务中除第一子任务的其他子任务。具体的，各个任务之间的关系即为任务工作流的依赖关系，前置任务关系和后继任务关系，另外还可包括各个任务对应的业务线标识。将各个任务之间的依赖关系和各个任务的固有资源消耗数据存储到数据库中，另外，数据库中还可以存储各个任务的唯一标识。示例性的，根据各个任务之间的依赖关系确定各个任务的类型，比如，是根任务、子任务或者叶子任务，另外，为了区分各个子任务，将根任务的子任务称为第一子任务，其他子任务称为第二子任务。S102、若检测到叶子任务的调度操作，则根据依赖关系和固有资源消耗数据计算各个叶子任务的分摊资源消耗数据，其中，叶子任务为没有后继任务的任务。其中，每个任务的当前资源消耗数据称为固有资源消耗数据，另外，根任务的固有资源消耗数据等于分摊资源消耗数据，子任务和叶子任务的分摊子资源消耗数据和前置任务的分摊资源消耗数据、前置任务的后继任务数以及当前子节点或者叶子节点的固有资源消耗数据有关。具体的，在检测到叶子任务的调度操作时，触发叶子任务对应业务线的资源分摊算法，以便根据依赖关系和固有资源消耗数据计算各个叶子任务的分摊资源消耗数据。S103、确定各个叶子任务的分摊资源消耗数据为对应的业务线目标资源消耗数据并进行存储。示例性的，根据各个任务对应的业务线标识确定各个叶子任务对应的业务线，确定各个叶子任务的分摊资源消耗数据为对应的业务线的目标分摊资源消耗数据，并存储至数据库。在一个具体的例子中，图2示出一种系统架构图，其中，各个任务之间的依赖关系、各个任务的固有资源消耗数据以及各个业务线的目标资源消耗数据均存储至数据库。本专利技术采用以上技术方案，通过任务工作流中每个任务的计算资源消耗量的层层分摊，直到叶子任务，最后计算出各个业务线的资源消耗数据，有效的统计出了各个业务线消耗大数据计算资源的占用情况，为大数据计算资源分配优化和业务线成本投入提供数据支撑和决策。在一个具体的例子中，图3示出了一种分摊原理示意图，参考图3来说明分摊资源数据的计算过程，其中，圆圈表示任务，箭头方向表示任务的后继依赖。示例性的，根据依赖关系和固有资源消耗数据计算各个叶子任务的分摊资源消耗数据，具体可以通过如下方式实现：基于依赖关系；根据根任务的固有资源消耗数据和各个第一子任务的固有资源消耗数据计算各个第一子任务的分摊资源消耗数据。参考图3，任务分别是A、B、C、D、E、F、G、H和I，其固有资源消耗数据分别本文档来自技高网...

【技术保护点】
1.一种业务线的任务资源消耗分摊方法，其特征在于，包括：/n获取各个任务之间的依赖关系以及各个任务的固有资源消耗数据，其中，各个任务分为根任务、子任务和叶子任务，所述子任务分为第一子任务和第二子任务，所述第一子任务包括根任务的子任务，所述第二子任务包括所述子任务中除所述第一子任务的其他子任务；/n若检测到叶子任务的调度操作，则根据所述依赖关系和所述固有资源消耗数据计算各个叶子任务的分摊资源消耗数据，其中，所述叶子任务为没有后继任务的任务；/n确定所述各个叶子任务的分摊资源消耗数据为对应的业务线目标资源消耗数据并进行存储。/n

【技术特征摘要】
1.一种业务线的任务资源消耗分摊方法，其特征在于，包括：
获取各个任务之间的依赖关系以及各个任务的固有资源消耗数据，其中，各个任务分为根任务、子任务和叶子任务，所述子任务分为第一子任务和第二子任务，所述第一子任务包括根任务的子任务，所述第二子任务包括所述子任务中除所述第一子任务的其他子任务；
若检测到叶子任务的调度操作，则根据所述依赖关系和所述固有资源消耗数据计算各个叶子任务的分摊资源消耗数据，其中，所述叶子任务为没有后继任务的任务；
确定所述各个叶子任务的分摊资源消耗数据为对应的业务线目标资源消耗数据并进行存储。


2.根据权利要求1所述的方法，其特征在于，所述依赖关系包括前置任务关系、后继任务关系，和，各个任务对应的业务线标识。


3.根据权利要求2所述的方法，其特征在于，所述根据所述依赖关系和所述固有资源消耗数据计算各个叶子任务的分摊资源消耗数据，包括：
基于所述依赖关系；
根据所述根任务的固有资源消耗数据和各个第一子任务的固有资源消耗数据计算各个第一子任务的分摊资源消耗数据；
根据各个第一子任务的分摊资源消耗数据和第二子任务的固有资源消耗数据，计算各个第二子任务的分摊资源消耗数据；
根据各个第二子任务的分摊资源消耗数据和叶子任务的固有资源消耗数据，计算各个叶子任务的分摊资源消耗数据。


4.根据权利要求3所述的方法，其特征在于，所述根据所述根任务的固有资源消耗数据和各个第一子任务的固有资源消耗数据计算各个第一子任务的分摊资源消耗数据，包括：
针对每个第一子任务，将所述根任务的固有资源消耗数据与根任务的后继任务数的比值，与，所述第一子任务的固有资源消耗数据相加，计算各个第一子任务的分摊资源消耗数据；
所述根据各个第一子任务的分摊资源消耗数据和第二子任务的固有资源消耗数据，计算各个第二子任务的分摊资源消耗数据，包括：
针对每个第二子任务，将所述第二子任务的前置任务的固有资源消耗数据与前置任务后继任务数的比值，与，所述第二子任务的固有资源消耗数据相加，计算各个第二子任务的分摊资源消耗数据；
所述根据各个第二子任务的分摊资源消耗数据和叶子任务的固有资源消耗数据，计算各个叶子任务的分摊资源消耗数据，包括：
针对每个叶子任务，将所述叶子任务的前置任务的固有资源消耗数据与前置任务后继任务数的比值，与，所述叶子任务的固有资源消耗数据相加，计算各个叶子任务的分摊...

【专利技术属性】
技术研发人员：唐佳明，
申请(专利权)人：上海中通吉网络技术有限公司，
类型：发明
国别省市：上海;31