一种基于自定义任务调度的主动采集的处理方法技术

技术编号:7917549 阅读:165 留言:0更新日期:2012-10-25 02:24
本发明专利技术公开了一种基于自定义任务调度的主动采集的处理方法,包括以下步骤:检索规则配置库、明确采集时限和采集对象、连接采集源、采集相应数据、数据是否存在、转换成原始数据和存入异常数据库。通过上述方式,本发明专利技术提供的基于自定义任务调度的主动采集的处理方法,为综合展示提供相关数据,主要是用于主动和定时执行相关数据的采集动作,提高了自定义任务调度的主动采集的效率。

【技术实现步骤摘要】

本专利技术涉及基于自定义任务调度的领域,特别是涉及。
技术介绍
目前,信息化建设正以前所未有的速度发展,各种各样的数据急剧膨胀。随着Web技术的不断发展,信息共享和数据交换的范围不断扩大,传统的关系数据库也面临着挑战,各种不同的数据库管理系统之间的数据需要进行任务调度,使其能够应用于数据采集环节中
技术实现思路
本专利技术主要解决的技术问题是提供,由系统自动运行,无需手工业务操作,为综合展示提供相关数据,主要是用于主动和定时执行相关数据的采集动作,提高了自定义任务调度的主动采集的效率。为解决上述技术问题,本专利技术采用的一个技术方案是提供,包括以下步骤 a、检索规则配置库,系统根据规则配置库定义的采集内容,准时和主动进行数据采集,输出相应的采集时限和采集对象; b、明确采集时限和采集对象,输入采集时限和采集对象经过明确后,输出采集规则信息; C、连接采集源,输入上述的采集规则信息,输出采集源信息; d、采集相应数据,输入上述的采集源信息,输出采集数据; e、数据是否存在,系统输入上述的采集数据进行数据判断,区分数据是否有异常,存在的数据的数据为正常数据,不存在的数据为异常数据; f、转换成原始数据,系统将采集到的正常数据经过转换成原始数据输出; g、存入异常数据库,将异常数据存入异常数据库,并创建相应的日志文件。在本专利技术一个较佳实施例中,所述的规则配置库定义的采集内容包括采集类型和采集时限。在本专利技术一个较佳实施例中,所述的原始数据为系统所采集或接收到的未经任何处理的数据 本专利技术的有益效果是本专利技术的基于自定义任务调度的主动采集的处理方法,按照规则配置库所定义的采集内容,主动获取机房综合环境相关的原始数据,为数据处理提供基础数据,由系统自动运行,无需手工业务操作,为综合展示提供相关数数据,主要是用于主动和定时执行相关数据的采集动作,提高了自定义任务调度的主动采集的效率。附图说明图I是本专利技术基于自定义任务调度的主动采集的处理方法一较佳实施例的流程图。具体实施例方式下面结合附图对本专利技术的较佳实施例进行详细阐述,以使本专利技术的优点和特征能更易于被本领域技术人员理解,从而对本专利技术的保护范围做出更为清楚明确的界定。请参阅图1,为本专利技术基于自定义任务调度的主动采集的处理方法一较佳实施例的流程图,该基于自定义任务调度的主动采集的处理方法,包括以下步骤 a、检索规则配置库,系统根据规则配置库定义的采集内容,准时和主动进行数据采集,输出相应的采集时限和采集对象; b、明确采集时限和采集对象,输入采集时限和采集对象经过明确后,输出采集规则信 息; C、连接采集源,输入上述的采集规则信息,输出采集源信息; d、采集相应数据,输入上述的采集源信息,输出采集数据; e、数据是否存在,系统输入上述的采集数据进行数据判断,区分数据是否有异常,存在的数据的数据为正常数据,不存在的数据为异常数据; f、转换成原始数据,系统将采集到的正常数据经过转换成原始数据输出; g、存入异常数据库,将异常数据存入异常数据库,并创建相应的日志文件。上述中的,规则配置库定义的采集内容包括采集类型和采集时限;原始数据为系统所采集或接收到的未经任何处理的数据 本专利技术中的“自定义”指NGDP的相关数据采集任务可以由用户自行设定其频率、状态等参数;“任务”指系统中采集或接收数据的动作;“调度”指系统中相关动作执行的安排。本专利技术中自定义任务调度的研发环境Java jdk I. 7 + eclipse 3. 7 ;服务器操作系统 CentOS 6.0 Linux, CPU Intel (R) Xeon(R) E5620 2. 40GHz,内存 4GB,硬盘 500GB ;客户端Windows 7专业版操作系统。本专利技术揭示的基于自定义任务调度的主动采集的处理方法,按照规则配置库所定义的采集内容,主动获取机房综合环境相关的原始数据,为数据处理提供基础数据,由系统自动运行,无需手工业务操作,为综合展示提供相关数数据,主要是用于主动和定时执行相关数据的采集动作,提高了自定义任务调度的主动采集的效率。以上所述仅为本专利技术的实施例,并非因此限制本专利技术的专利范围,凡是利用本专利技术说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的
,均同理包括在本专利技术的专利保护范围内。权利要求1.,其特征在于,包括以下步骤 a、检索规则配置库,系统根据规则配置库定义的采集内容,准时和主动进行数据采集,输出相应的采集时限和采集对象;b、明确采集时限和采集对象,输入采集时限和采集对象经过明确后,输出采集规则信息; C、连接采集源,输入上述的采集规则信息,输出采集源信息; d、采集相应数据,输入上述的采集源信息,输出采集数据; e、数据是否存在,系统输入上述的采集数据进行数据判断,区分数据是否有异常,存在的数据的数据为正常数据,不存在的数据为异常数据; f、转换成原始数据,系统将采集到的正常数据经过转换成原始数据输出; g、存入异常数据库,将异常数据存入异常数据库,并创建相应的日志文件。2.根据权利要求I所述的基于自定义任务调度的主动采集的处理方法,其特征在于,所述的规则配置库定义的采集内容包括采集类型和采集时限。3.根据权利要求I所述的基于自定义任务调度的主动采集的处理方法,其特征在于,所述的原始数据为系统所采集或接收到的未经任何处理的数据。全文摘要本专利技术公开了,包括以下步骤检索规则配置库、明确采集时限和采集对象、连接采集源、采集相应数据、数据是否存在、转换成原始数据和存入异常数据库。通过上述方式,本专利技术提供的基于自定义任务调度的主动采集的处理方法,为综合展示提供相关数据,主要是用于主动和定时执行相关数据的采集动作,提高了自定义任务调度的主动采集的效率。文档编号G06F9/46GK102750182SQ20121019189公开日2012年10月24日 申请日期2012年6月12日 优先权日2012年6月12日专利技术者王清 申请人:苏州微逸浪科技有限公司本文档来自技高网
...

【技术保护点】
一种基于自定义任务调度的主动采集的处理方法,其特征在于,包括以下步骤:a、检索规则配置库,系统根据规则配置库定义的采集内容,准时和主动进行数据采集,输出相应的采集时限和采集对象;b、明确采集时限和采集对象,输入采集时限和采集对象经过明确后,输出采集规则信息;c、连接采集源,输入上述的采集规则信息,输出采集源信息;d、采集相应数据,输入上述的采集源信息,输出采集数据;e、数据是否存在,系统输入上述的采集数据进行数据判断,区分数据是否有异常,存在的数据的数据为正常数据,不存在的数据为异常数据;f、转换成原始数据,系统将采集到的正常数据经过转换成原始数据输出;g、存入异常数据库,将异常数据存入异常数据库,并创建相应的日志文件。

【技术特征摘要】

【专利技术属性】
技术研发人员:王清
申请(专利权)人:苏州微逸浪科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1