当前位置: 首页 > 专利查询>清华大学专利>正文

网格中基于历史数据建模的作业性能预测方法技术

技术编号:4250222 阅读:291 留言:1更新日期:2012-04-11 18:40
网格中基于历史数据建模的作业性能预测方法,属于高性能网格中作业完成时间建模及预测方法,其特征在于在网格节点中建立基于CGSP网格软件和CGSV网格软件的历史作业信息库,内有N个历史作业信息,涉及资源配置、资源负载、作业请求及作业实际性能四个方面,同时建立一个由多个候选回归函数组成的集合,在预测时用户所提交的第N+1个作业根据第N个作业的回归模型得到,而该第N个作业的回归模型又根据第N个作业的作业实际性能和根据第N-1个作业的各个候选回归模型的实际性能预测值结果之差值中选择一个差值最小的候选回归模型得到,仿真实验证明本发明专利技术可以解决资源负载过大所导致的作业时间开销急剧上升的问题。

【技术实现步骤摘要】

本专利技术涉及高性能网格中作业完成时间建模方法,属于分布式技术与系统领域。
技术介绍
现代科学研究中人们求解问题的领域在不断扩大,所遇到的问题也越来越复杂, 而且规模越来越大,解决这些问题所需要的计算能力也在大幅度提高,局部的计算资源已 经无法满足需求。随着计算机和网络技术的迅猛发展,很多组织和科研单位都拥有计算能 力很强的超级计算机,但这些机器往往因为只是孤立的为本单位服务而没有充分发挥作 用,在大部分时间处于空闲状态。因此,打破地域的限制,协同使用在网络上广泛分布的各 类资源已成为必须的要求。 网格技术的提出和发展正是为了满足上述这种要求,其目标是实现网格虚拟环境 上异构资源的共享和协同工作,消除信息孤岛和资源孤岛。与它相关的技术包括网络技 术、XML技术、Web服务技术(web service)、语义网(semantic web)、高性能计算等。随着 网格技术的逐渐成熟,结合了面向服务理念的开放式网格服务架构(Open Grid Services Architecture, OGSA)已成为网格界事实上的标准,而Web服务资源框架(WS-Resource Framework,本文档来自技高网...

【技术保护点】
网格中基于历史数据建模的作业性能预测方法,其特征在于所述方法是在包括计算机、网络、存储系统在内的作为共享资源的网格节点上按照如下步骤实现的:    步骤(1)初始化    在所述网格节点上设置:基于Web服务资源框架OGSA的CGSP网格软件和CGSV网格软件,其中CGSP网格软件是中国网格ChinaGrid中一个为其他专业网格提供公共支撑平台的中间件,集成了中国教育科研网络CERNET上的各种议购的教育和研究资源;    CGSV网格软件是中国网格ChinaGrid中的对分ussian]、P↓[InverseMultiquadric]、P↓[Multiquadric]和P↓[Polynomi...

【技术特征摘要】
网格中基于历史数据建模的作业性能预测方法,其特征在于所述方法是在包括计算机、网络、存储系统在内的作为共享资源的网格节点上按照如下步骤实现的步骤(1)初始化在所述网格节点上设置基于Web服务资源框架OGSA的CGSP网格软件和CGSV网格软件,其中CGSP网格软件是中国网格ChinaGrid中一个为其他专业网格提供公共支撑平台的中间件,集成了中国教育科研网络CERNET上的各种议购的教育和研究资源;CGSV网格软件是中国网格ChinaGrid中的对分布式资源进行监控的工具,同时收集和查询包括硬件、系统、网络和所述CGSP网格软件在内的共享资源的动态信息;历史作业信息库HJIR,存储有当前的N条历史作业信息,其中每一条历史作业信息的记录格式为资源配置信息、资源负载信息、作业请求信息以及作业实际性能信息,每一条所述历史作业信息均由所述CGSP网格软件和CGSV网格软件在内构成,其中资源配置信息至少包括各网格节点中的CPU个数、内存容量、最大带宽、操作系统及其版本以及其他软件及其版本,这些都反映了所述网格资源在执行相应作业的软件和硬件的配置信息;资源负载信息至少包括执行相应作业时网格节点的CPU空闲率、内存空闲率和可用带宽,反映了网格节点在执行相应作业时的负载情况;作业请求信息至少包括作业请求的应用类型、命令行参数及其符值、输入数据及其大小,反映了历史上的同类作业请求的输入信息;作业实际性能信息至少包括历史作业执行时间开销以及作业数据传输时间开销,反映了在作业执行完成后,系统收集到的有关作业性能的实际数据;在所述网...

【专利技术属性】
技术研发人员:武永卫杨广文陈刚柳佳
申请(专利权)人:清华大学
类型:发明
国别省市:11[中国|北京]

网友询问留言 已有1条评论
  • 来自[北京市百度蜘蛛] 2015年01月30日 16:47
    对过去的一些人和事,通过各种方式保留下来,并能够让更多的人学习
    0
1