一种任务调度方法、系统及装置制造方法及图纸

技术编号:7935381 阅读:188 留言:0更新日期:2012-11-01 05:04
本发明专利技术公开了一种任务调度方法、系统及装置,应用于Hadoop架构中,包括:处理节点向主节点提交申请映射(Map)任务的请求;主节点接收到申请Map任务的请求后,在为处理节点分配Map任务的过程中,将一个作业(Job)中处理节点的本地Map任务分配给处理节点后,在未达到处理节点的最多Map任务分配数的情况下,选定下一个Job,为处理节点继续分配本地Map任务。本发明专利技术在将一个Job中处理节点的本地Map任务分配给处理节点后,在未达到处理节点的最大Map任务分配数的情况下,选定下一个Job为处理节点分配本地Map任务,提高了多Job运行时的Map任务本地化执行率,降低了网络开销。

【技术实现步骤摘要】

【技术保护点】
一种任务调度方法,应用于Hadoop架构中,包括:处理节点向主节点提交申请映射(Map)任务的请求;所述主节点接收到所述申请Map任务的请求后,在为所述处理节点分配Map任务的过程中,将一个作业(Job)中所述处理节点的本地Map任务分配给所述处理节点后,在未达到所述处理节点的最多Map任务分配数的情况下,选定下一个Job,为所述处理节点继续分配本地Map任务。

【技术特征摘要】

【专利技术属性】
技术研发人员:娄江国
申请(专利权)人:中兴通讯股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1