任务合并处理方法、装置、设备及计算机可读存储介质制造方法及图纸

本申请实施例提供一种任务合并处理方法、装置、设备及计算机可读存储介质，方法包括：获取预设系统中各执行任务的运行资源占比；获取待处理的目标任务，以及目标任务对应的预测资源占比；根据各运行资源占比以及预测资源占比，从执行任务中确定目标任务对应的关联任务，并暂停关联任务；将关联任务和目标任务合并，得到合并任务，直至预设系统的剩余资源满足合并任务对应的需求资源时，执行合并任务。本申请实施例提供的任务合并处理方法，通过监控并获取系统里面各执行任务的运行资源占比，能够找到资源占比相关的关联任务，并将关联任务和目标任务合并处理，从而能够合理利用系统的资源，避免资源的浪费。

【技术实现步骤摘要】

本申请实施例涉及大数据处理，具体涉及一种任务合并处理方法、装置、设备及计算机可读存储介质。

技术介绍

1、大数据时代的数据特征包括volume(大量)，velocity(高速)，variety(多样)，value(低价值密度)，veracity(真实)。而在数据的应用过程中，实时性高的数据应用方式比低实时效果的数据应用会带来更大的价值。因此，对于公司而言，往往会使用数据处理系统来实现对数据的应用。

2、目前，数字化公司所使用的数据处理系统通常会面向公司内部的不同用户，并存储有不同用户提供的库表。然而，目前的数据处理系统往往只能按照用户发起的库表更新任务的时间对系统内的库表进行更新，这些更新任务所消耗的系统资源不同，往往会造成系统资源的浪费。

技术实现思路

1、本申请实施例提供一种任务合并处理方法、装置、设备及计算机可读存储介质，旨在解决现有数据处理系统在对系统内的库表进行更新时存在的系统资源浪费的问题。

2、一方面，本申请实施例提供一种任务合并处理方法，包括：>

3、获取预设本文档来自技高网...

【技术保护点】

1.一种任务合并处理方法，其特征在于，包括：

2.根据权利要求1所述的任务合并处理方法，其特征在于，所述根据各所述运行资源占比以及所述预测资源占比，从所述执行任务中确定所述目标任务对应的关联任务，包括：

3.根据权利要求2所述的任务合并处理方法，其特征在于，所述根据各所述执行任务对应的资源消耗相似度之间的大小关系，从所述执行任务中确定所述目标任务对应的关联任务，包括：

4.根据权利要求1所述的任务合并处理方法，其特征在于，所述执行所述合并任务之后，所述方法包括：

5.根据权利要求1所述的任务合并处理方法，其特征在于，所述获取预设系统中各执行...

【技术特征摘要】

1.一种任务合并处理方法，其特征在于，包括：

2.根据权利要求1所述的任务合并处理方法，其特征在于，所述根据各所述运行资源占比以及所述预测资源占比，从所述执行任务中确定所述目标任务对应的关联任务，包括：

3.根据权利要求2所述的任务合并处理方法，其特征在于，所述根据各所述执行任务对应的资源消耗相似度之间的大小关系，从所述执行任务中确定所述目标任务对应的关联任务，包括：

4.根据权利要求1所述的任务合并处理方法，其特征在于，所述执行所述合并任务之后，所述方法包括：

5.根据权利要求1所述的任务合并处理方法，其特征在于，所述获取预设系统中各执行任务的运行资源占比，包括：

6.根据权利要求1所述的任务合并处理方法，其特征在于，所述根据各所述运行资源占比以及所述预测资源占比，从所述执行任务中确定所述目标...

【专利技术属性】
技术研发人员：李宣廷，谈政荣，刘志全，陈汉松，史沛鑫，王聪，汤伶俐，刘保安，殷琦，陈新江，朱小康，范亚博，
申请(专利权)人：顺丰科技有限公司，
类型：发明
国别省市：