本发明专利技术提供了一种数据采集方法及装置，其中采集方法包括：建立数据采集任务队列；生成数据主采集任务并将所述主采集任务加入所述数据采集任务队列；从所述数据采集任务队列中获取并执行主采集任务，所述主采集任务执行失败后，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列；从所述数据采集任务队列中获取并执行所述补采集任务。该采集方法能够保证采集的性能数据在时间粒度上的完整性。
【技术实现步骤摘要】
本专利技术涉及数据通信领域，尤其涉及一种数据采集方法及装置。
技术介绍
性能管理是电信网管系统的重要组成部分。性能管理的基础是性能数据，用户通过对性能数据的统计分析，可以了解网络的整体运行状况，为运营商的管理、决策提供依据。现有对性能数据采集的方法是周期性的产生主采集任务来采集系统的性能数据。但是由于网络原因，或者网元设备故障，经常会出现性能数据延迟上报的情况。当性能数据出现延迟上报，会出现性能管理的数据采集任务采集不到当前时间粒度的数据，导致性能数据出现了时间粒度上的不完整，而影响了对性能数据的统计分析。
技术实现思路
本专利技术要解决的主要技术问题是，提供一种数据采集方法及装置能够保证数据在时间粒度上的完整性。为解决上述技术问题，本专利技术提供一种数据采集方法，包括以下步骤:建立数据采集任务队列；生成数据主采集任务并将所述主采集任务加入所述数据采集任务队列；从所述数据采集任务队列中获取并执行主采集任务，所述主采集任务执行失败后，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列；从所述数据采集任务队列中获取并执行所述补采集任务。进一步地，所述主采集任务失败后，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列包括:收到所述主采集任务失败通知后，间隔一段时间后自动生成所述补采集任务并加入所述数据采集任务队列；或者收到所述主采集任务失败通知后，立即自动生成所述补采集任务并加入所述数据采集任务队列。进一步地,所述方法还包括:当执行所述补采集任务失败时，判断执行所述补采集任务的次数是否小于预设次数，若是，则重新生成执行失败的补采集任务并加入所述数据采集任务队列；若否，则判定执行自动生成的补采集任务失败。进一步地，所述生成数据主采集任务并将所述主采集任务加入所述数据采集任务队列包括:每隔一段时间生成数据主采集任务并将生成的主采集任务加入所述数据采集任务队列；生成数据主采集任务的时间间隔值与生成补采集任务的时间间隔值不相同。进一步地，当判定执行自动生成的补采集任务失败后，还包括:接收手工补米指令；根据所述手工补采指令生成手工补采集任务并加入到所述数据采集任务队列中；从所述数据采集任务队列中获取并执行所述手工补采集任务。进一步地，所述建立数据采集任务队列包括:建立数据采集任务队列，在所述采集任务队列中设置采集任务优先级，采集任务的优先级从高到低的顺序为:主采集任务、自动生成的补采集任务、手动补采集任务；或者所述建立数据采集任务队列包括:建立数据采集任务队列，根据采集任务的生成时间顺序排列所述数据采集任务队列中的采集任务。进一步地，当主采集任务失败时，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列包括:收到所述主采集任务失败通知后接收手工补采指令；根据所述手工补采指令生成手工补采集任务并加入到所述数据采集任务队列中。同样为了解决上述的技术问题，本专利技术还提供了一种数据采集装置，包括:数据采集主控模块、主采集任务产生模块、补采集任务产生模块以及采集任务执行模块；所述数据采集主控模块用于建立一个数据采集任务队列；所述主采集任务产生模块用于生成数据主采集任务并将所述主采集任务加入所述数据采集任务队列；所述采集任务执行模块用于从所述数据采集任务队列中获取并执行采集任务；所述补采集任务产生模块用于当所述主采集任务执行失败时，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列。进一步地，所述补采集任务产生模块包括自动补采集任务产生子模块；所述自动补采集任务产生子模块用于收到所述主采集任务失败通知后，间隔一段时间后自动生成所述补采集任务并加入所述数据采集任务队列；或者用于收到所述主采集任务失败通知后，立即自动生成所述补采集任务并加入所述数据采集任务队列。进一步地，所述的数据采集装置还包括:执行次数判断模块；所述执行次数判断模块用于当执行所述补采集任务失败时，判断执行所述补采集任务的次数是否小于预设次数，若是，则通知所述自动补采集任务产生子模块重新生成执行失败的补采集任务并加入所述数据采集任务队列；若否，则判定执行自动生成的补采集任务失败。进一步地，所述主采集任务产生模块用于每隔一段时间生成数据主采集任务并将所述主采集任务加入所述数据采集任务队列，生成数据主采集任务的时间间隔值与生成补采集任务的时间间隔值不相同。进一步地，所述数据采集装置还包括:指令接收模块和手工补采集任务产生模块；所述指令接收模块用于当判定执行自动生成的补采集任务失败后，接收手工补采指令；所述手工补采集任务产生模块用于根据所述手工补采指令生成手工补采集任务并加入到所述数据采集任务队列中；所述采集任务执行模块还用于从所述数据采集任务队列中获取并执行所述手工补采集任务。进一步地，所述补采集任务产生模块包括:指令接收子模块和手工补采集任务产生子模块；所述指令接收子模块用于在收到所述主采集任务失败通知后，接收用户输入的手工补米指令；所述手工补采集任务产生子模块用于根据所述手工补采指令生成手工补采集任务并加入到所述数据采集任务队列中。本专利技术的有益效果是:本专利技术的数据采集方法及装置能够保证性能数据在时间粒度上的完整性，其中性能数据采集方法包括:建立数据采集任务队列；生成数据主采集任务并将所述主采集任务加入所述数据采集任务队列；从所述数据采集任务队列中获取并执行所述主采集任务，在执行所述主采集任务失败后，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列；从所述数据采集任务队列中获取并执行所述补采集任务；该方法在主采集任务失败后产生相应的补采集任务继续采集没有采集到的数据，保证了数据的完整性，若是此时是对性能数据采集则保证了性能数据的完整性。并且本专利技术性能数据采集方法通过建立采集任务队列使任务执行过程和任务产生的过程独立起来，避免采集任务执行延时的问题。附图说明图1为本专利技术实施例一性能数据采集方法的一种流程图；图2为本专利技术实施例一性能数据采集方法的另一种流程图；图3为本专利技术实施例二性能数据采集装置的第一种结构示意图；图4为本专利技术实施例二性能数据采集装置的第二种结构示意图；图5为本专利技术实施例二性能数据采集装置的第三种结构示意图；图6为本专利技术实施例二性能数据采集装置的第四种结构示意图；图7为本专利技术实施例二性能数据采集装置的第五种结构示意8为本专利技术实施例二数据采集数控线程的工作流程图；图9为本专利技术实施例二数据主采定时器的处理流程图；图10为本专利技术实施二自动补采定时器的处理流程图。具体实施例方式下面通过具体实施方式结合附图对本专利技术作进一步详细说明。本专利技术的数据采集方法实用对各种系统中数据的采集，下面就以对电信网管软件系统中性能数据采集为例来说明本专利技术的数据采集方法。实施例一:如图1所示，本实施例的性能数据采集方法包括:步骤101:建立性能数据采集任务队列；步骤102:生成性能数据主采集任务并将所述主采集任务加入所述性能数据采集任务队列；步骤103:从所述数据采集任务队列中获取并执行主采集任务，所述主采集任务执行失败后，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列；步骤104:从所述性能数据采集任务队列中获取并执行所述补采集任务。上述步骤103中所述主采集任务失败后，生成与该主采集任务对应的补采集任务并加入所述数据采本文档来自技高网...
【技术保护点】
一种数据采集方法，其特征在于，包括以下步骤：建立数据采集任务队列；生成数据主采集任务并将所述主采集任务加入所述数据采集任务队列；从所述数据采集任务队列中获取并执行主采集任务，所述主采集任务执行失败后，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列；从所述数据采集任务队列中获取并执行所述补采集任务。
【技术特征摘要】
1.一种数据采集方法，其特征在于，包括以下步骤: 建立数据采集任务队列； 生成数据主采集任务并将所述主采集任务加入所述数据采集任务队列； 从所述数据采集任务队列中获取并执行主采集任务，所述主采集任务执行失败后，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列； 从所述数据采集任务队列中获取并执行所述补采集任务。2.按权利要求1所述的数据采集方法，其特征在于，所述主采集任务失败后，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列包括: 收到所述主采集任务失败通知后，间隔一段时间后自动生成所述补采集任务并加入所述数据采集任务队列； 或者收到所述主采集任务失败通知后，立即自动生成所述补采集任务并加入所述数据米集任务队列。3.按权利要求2所述的数据采集方法，其特征在于，所述方法还包括: 当执行所述补采集任务失败时，判断执行所述补采集任务的次数是否小于预设次数，若是，则重新生成执行失 败的补采集任务并加入所述数据采集任务队列；若否，则判定执行自动生成的补采集任务失败。4.按权利要求3所述的数据采集方法，其特征在于，所述生成数据主采集任务并将所述主采集任务加入所述数据采集任务队列包括: 每隔一段时间生成数据主采集任务并将生成的主采集任务加入所述数据采集任务队列；生成数据主采集任务的时间间隔值与生成补采集任务的时间间隔值不相同。5.按权利要求4所述的数据采集方法，其特征在于，当判定执行自动生成的补采集任务失败后，还包括: 接收用户输入的手工补采指令； 根据所述手工补采指令生成手工补采集任务并加入到所述数据采集任务队列中； 从所述数据采集任务队列中获取并执行所述手工补采集任务。6.按权利要求5所述的数据采集方法，其特征在于，所述建立数据采集任务队列包括: 建立数据采集任务队列，在所述采集任务队列中设置采集任务优先级，采集任务的优先级从高到低的顺序为:主采集任务、自动生成的补采集任务、手动补采集任务； 或者 所述建立数据采集任务队列包括:建立数据采集任务队列，根据采集任务的生成时间顺序排列所述数据采集任务队列中的采集任务。7.按权利要求1所述的数据采集方法，其特征在于，所述主采集任务失败后，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列包括: 收到所述主采集任务失败通知后接收用户输入的手工补采指令； 根据所述手工补采指令生成手工补...
【专利技术属性】
技术研发人员：方楷，
申请(专利权)人：中兴通讯股份有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。