一种带有期限和费用约束的工作流调度方法技术

技术编号:15792629 阅读:279 留言:0更新日期:2017-07-10 01:24
本发明专利技术属于分布式计算下工作流调度领域,涉及一种带有期限和费用约束的工作流调度方法。本发明专利技术对带期限和费用的工作流调度问题给出了新的模型并提出了一种新的调度方法,该方法定义了每个任务的实际平均预算erc,以其作为判定函数降低了算法的复杂度,为更合理的考虑期限的约束,算法以SDL来确定任务的优先级。实验表明,本方法在费用和期限两个约束下DAG调度的成功率比较高。发明专利技术目的:以解决当有费用和期限两个约束时工作流的调度问题,期望在给定费用和期限的约束下完成DAG调度,即获得较高的DAG调度成功率。

【技术实现步骤摘要】
一种带有期限和费用约束的工作流调度方法
本专利技术属于分布式计算下工作流调度领域,涉及一种带有期限和费用约束的工作流调度方法。
技术介绍
近年来,网格和云计算的发展为大型的科学计算应用提供了良好的平台,很多大规模科学计算问题都可以抽象为工作流(DAG)模型。工作流调度问题,是指给定工作流的任务作为对象,若干的处理器作为完成任务的资源,要在满足一定的约束条件下,对任务和处理器进行分配并安排先后次序,将所需的资源进行最优分配和最优调度。调度问题在物流、航空航天、医疗、生物等各领域都有广泛的应用。在网格或云平台下,用户通常需要在一定时间和费用内完成工作流调度,资源的管理者根据资源的不同性能给出不同的价格,用户想租用资源完成复杂的应用程序,因此他们需要支付资源管理者一定的费用并且希望在有限的时间内完成任务,而资源的管理者需要合理分配资源,使得资源不被浪费,这就需要规划者给出合理的调度方法使得用户和资源管理者都接受[1]。因此,用户、资源管理者、规划者是带有费用和期限约束的工作流调度问题的实体,图1说明了用户、资源管理者、规划者三者的关系。对于云环境下带有费用和期限约束的工作流(DAG)调度问题,对于用户定的费用约束B和期限约束D下,一般只用费用和期限这两个约束来描述带有费用和期限约束的工作流调度问题,数学模型表示为:∑cost≤B,makespan≤D。其中∑cost表示完成任务调度所需要的总花费,makespan表示完成出口任务的最早完成时间。对于规划者给出合理的优化调度方案很重要。对于带期限和费用的工作流调度问题研究,近两年的相关文献给出了一些主要算法主要见文献[1,2,3]。2013年,Zhang和Sakellariou提出的BHEFT算法[1]是在资源存在负载的情况下考虑期限和费用的优化算法,但是不存在判定函数完全找不到资源的情况,但实际是存在这种情况的,所以对于费用很小的情况下使用最早完成时间调度的情况不存在。2014年,Arabnejad和Barbosa提出了HBCS算法[2],提出了最低剩余预算RCB的定义,根据期限和费用定义参数进行资源的选择。但是HBCS算法在期限和费用的约束下DAG调度的成功率不高。2016年,Arabnejad和Barbosa又给出了DBCS算法[3],在时间参数因子中加入了子期限SDL,来进行资源的选择,这使得任务的调度中费用和期限的均衡约束起到的作用比较明显,但是DBCS算法的DAG调度的成功率仍然不如本方法的DAG调度成功率高。
技术实现思路
针对现有模型和方法存在的问题,本专利技术对带期限和费用的工作流调度问题给出了新的模型并提出了一种新的调度方法。该方法定义了每个任务的实际平均预算erc,以其作为判定函数降低了算法的复杂度。为更合理的考虑期限的约束,算法以SDL来确定任务的优先级。实验表明,本方法在费用和期限两个约束下DAG调度的成功率比较高。专利技术目的:以解决当有费用和期限两个约束时工作流的调度问题,期望在给定费用和期限的约束下完成DAG调度,即获得较高的DAG调度成功率。对于云环境下带有费用和期限约束的工作流(DAG)调度问题描述如下:记DAG的图为G={V,E},其中任务集合为V={n1,n2,...nn},|V|=n表示工作流中所有任务节点的个数为n;E是有向边的集合,表示任务间的前后依赖关系,对任意的边(ni,nq)∈E,任务ni执行后才执行任务nq,任务ni到任务nq存在传递时间Aiq,DAG中没有前继的任务称为入口任务nentry,没有后继的任务称为出口任务nexit。图2表示的是一个含有10个任务节点的DAG任务图。资源集合记为P={p1,p2,...pm},|P|=m表示有m个资源,每一个任务ni都要在资源pj上执行且存在执行时间wij,任务ni在资源pj上有执行费用cij,在给定的费用约束B和期限约束D下,期望得到最后任务的完成时间(makespan)和总费用(cost)最小。通过分析问题以及变量之间的关系,对此本专利技术给出了此问题的线性规划模型(IP):,(IP)(STij+wij)xij≤d,i=1,...n,j=1,...m,(1.4)xij∈{0,1}(1.5)这里xij是一个布尔变量,当任务ni选择资源pj时,xij值为1,当任务ni不选择资源pj时,xij值为0;(1.1)表示每一个任务都要安排到资源上;(1.2)表示最后任务的完成时间不超过d,其中d表示问题的最优调度的期限,表示最后任务的完成时间;(1.3)表示任务在资源的费用之和不超过给定的费用B;(1.4)表示每个安排的任务的完成时间不超d,其中STij表示任务ni在资源pj上的到达时间。一种带有期限和费用约束的工作流调度方法,包括以下步骤:步骤1:DAG中每个任务优先级的确定,具体方法如下:计算DAG中每个任务的子期限SDL值,公式如下:其中succ(ni)为任务ni的后继任务集合,Ai,p表示任务ni到任务np的传递时间,ETmin(np)表示任务np在所有资源上的最小执行时间,因为出口任务nexit没有后继节点,所以将SDL(nexit)作为计算的初始值,令SDL(nexit)=D,其中D为给定的期限。从出口任务nexit的SDL值向前推导,即可计算出所有任务的子期限值。用子期限SDL值作为任务节点调度的优先级,SDL值越小,优先级越高,将任务按优先级由高到低依次进行排序,得到一组待调度序列L。步骤2:资源的选取,具体方法如下:步骤(2.1)取待调度序列L中优先级最高的任务nk,按如下公式计算当前任务nk的剩余预算sab:其中B是给定的预算,cf表示任务nf在已安排资源上的费用,表示优先级排在任务nk后面的未安排任务nh在所有资源上的平均费用。步骤(2.2)计算任务nk的实际平均预算erc其中fk为调节参数,定义如下:表示任务nk在所有资源上的平均费用,表示优先级排在任务nk后面的未安排任务nh在所有资源上的平均费用,若sab(nk)的值大于等于0,fk的取值为任务nk在所有资源上的平均费用与剩余未安排任务在所有资源上的平均费用之和之比,若sab(nk)的值小于0,fk的取值为0。rb表示为任务nk的剩余费用,每次计算下一个任务时更新剩余费用,l为未调度任务的个数。步骤(2.3)对于任务nk,按照如下公式,找到当前调度任务nk在资源上的费用小于等于任nk的实际平均预算erck的资源的集合wk:其中cko表示任务nk在资源po上的执行费用,erck表示任务nk的实际平均预算,wko表示任务nk所选择的资源po,其中o的取值不唯一,wk集合的作用为找到满足条件cko≤erck的资源po。步骤(2.4)计算任务nk在集合wk中的资源pj上的最早完成时间EFT(nk,pj),先计算任务nk在资源pj上的最早开始时间EST(nk,pj),定义如下:EFT(nk,pj)=EST(nk,pj)+wk,j(6)其中pred(nk)表示任务nk的前继任务的集合,Tavail[j]表示任务在资源pj上的可以开始的最早时间,AFT(ng)表示任务nk的前继任务ng的实际完成时间,Agk表示任务ng到任务nk之间的传递时间,内层max表示任务nk的所有的前继任务ng到达资源pj的时间,wk,j本文档来自技高网
...
一种带有期限和费用约束的工作流调度方法

【技术保护点】
一种带有期限和费用约束的工作流调度方法,其特征在于,包括以下步骤:步骤1:DAG中每个任务优先级的确定,具体方法如下:计算DAG中每个任务的子期限SDL值,公式如下:

【技术特征摘要】
1.一种带有期限和费用约束的工作流调度方法,其特征在于,包括以下步骤:步骤1:DAG中每个任务优先级的确定,具体方法如下:计算DAG中每个任务的子期限SDL值,公式如下:其中succ(ni)为任务ni的后继任务集合,Ai,p表示任务ni到任务np的传递时间,ETmin(np)表示任务np在所有资源上的最小执行时间,因为出口任务nexit没有后继节点,所以将SDL(nexit)作为计算的初始值,令SDL(nexit)=D,其中D为给定的期限;从出口任务nexit的SDL值向前推导,即可计算出所有任务的子期限值;用子期限SDL值作为任务节点调度的优先级,SDL值越小,优先级越高,将任务按优先级由高到低依次进行排序,得到一组待调度序列L;步骤2:资源的选取,具体方法如下:步骤(2.1)取待调度序列L中优先级最高的任务nk,按如下公式计算当前任务nk的剩余预算sab:其中B是给定的预算,cf表示任务nf在已安排资源上的费用,ch表示优先级排在任务nk后面的未安排任务nh在所有资源上的平均费用;步骤(2.2)计算任务nk的实际平均预算erc其中fk为调节参数,定义如下:表示任务nk在所有资源上的平均费用,表示优先级排在任务nk后面的未安排任务nh在所有资源上的平均费用,若sab(nk)的值大于等于0,fk的取值为任务nk在所有资源上的平均费用与剩余未安排任务在所有资源上的平均费...

【专利技术属性】
技术研发人员:孙婷徐秀杰肖创柏
申请(专利权)人:北京工业大学
类型:发明
国别省市:北京,11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1