【技术实现步骤摘要】
数据监控方法、任务监控方法、系统和计算机可读介质
本公开涉及数据处理
，特别涉及一种数据监控方法、任务监控方法、数据监控模块、任务监控系统和计算机可读介质。
技术介绍
通信运营商大数据不但具备大数据的一般特点(数据量大、数据多样性等)外，还具备有与其业务相关的特征，比如多厂商数据、数据发送时间不确定性、数据完整不确定性等。如果按照传统的定时执行任务，则可能出现如下现象：1)在开始执行任务时，从数据源处接收到的数据不完整，导致执行任务时所使用的数据不完整，相应任务的处理结果有误；2)在开始执行任务时，数据源处提供的完整数据早已经到达，数据处理实时性较差。导致上述现象的问题在于，现有技术中缺乏对数据源所发送数据进行实时监控的机制。
技术实现思路
本公开旨在至少解决现有技术中存在的技术问题之一，提出了一种数据监控方法、任务监控方法、数据监控模块、任务监控系统和计算机可读介质。第一方面，本公开实施例提供了一种数据监控方法，包括：确定待监测数据源所配置的数据到达检测策略；基于所...
【技术保护点】
1.一种数据监控方法，其中，包括：/n确定待监测数据源所配置的数据到达检测策略；/n基于所述数据到达检测策略检测所述待监测数据源所发送的数据是否已经到达预定水平状态；/n当检测出所述待监测数据源所发送的数据未到达所述预定水平状态时，则继续执行所述确定待监测数据源所配置的数据到达检测策略；/n当检测出所述待监测数据源所发送的数据已经到达所述预定水平状态时，则将所述待监测数据源标记到达。/n
【技术特征摘要】
1.一种数据监控方法，其中，包括：
确定待监测数据源所配置的数据到达检测策略；
基于所述数据到达检测策略检测所述待监测数据源所发送的数据是否已经到达预定水平状态；
当检测出所述待监测数据源所发送的数据未到达所述预定水平状态时，则继续执行所述确定待监测数据源所配置的数据到达检测策略；
当检测出所述待监测数据源所发送的数据已经到达所述预定水平状态时，则将所述待监测数据源标记到达。
2.根据权利要求1所述的数据监控方法，其中，在所述将所述待监测数据源标记到达的步骤之后，还包括：
获取所述待监测数据源所发送的数据的到达时间和到达数据量；
基于所述到达时间和到达数据量检测所述待监测数据源发送数据过程是否异常。
3.根据权利要求2所述的数据监控方法，其中，所述基于所述到达时间和到达数据量检测所述待监测数据源发送数据过程是否异常的步骤包括：
判断所述到达时间是否处于第一预定时间范围内，以及判断所述到达数据量是否处于第一预定数据量范围内；
当判断出所述到达时间处于所述第一预定时间范围内且所述到达数据量处于第一预定数据量范围内时，则检测出所述待监测数据源发送数据过程正常；否则，检测出所述待监测数据源发送数据过程异常，并取消对所述待监测数据源标的标记到达。
4.根据权利要求3所述的数据监控方法，其中，在所述判断所述到达时间是否处于第一预定时间范围内，以及判断所述到达数据量是否处于第一预定数据量范围内的步骤之前，还包括：
根据所述待监测数据源所发送的数据的历史到达时间和历史到达数据量，预测出所述第一预定时间范围和所述第一预定数据量范围。
5.根据权利要求3所述的数据监控方法，其中，在所述检测出所述待监测数据源发送数据过程异常的步骤之后，还包括：
判断所述到达时间是否处于第二预定时间范围内，以及判断所述到达数据量是否处于第二预定数据量范围内；其中，所述第二预定时间范围完全覆盖所述第一预定时间范围且与所述第一预定时间范围不相等，所述第二预定数据量范围完全覆盖所述第一预定数据量范围且与所述第一预定数据量范围不相等；
当判断出所述到达时间处于所述第二预定时间范围内且所述到达数据量处于所述第二预定数据量范围内时，则对所述待监测数据源所发送的数据进行补采，此后继续执行所述确定待监测数据源所配置的数据到达检测策略的步骤；
当判断出所述到达时间处于所述第二预定时间范围外，和/或所述到达数据量处于所述第二预定数据量范围外时，则发出警报提示信息。
6.根据权利要求1所述的数据监控方法，其中，当检测出所述待监测数据源所发送的数据已经到达预定水平状态时，经过预先配置的延时时间之后，再执行所述将所...
【专利技术属性】
技术研发人员：韩碧霞，
申请(专利权)人：中兴通讯股份有限公司，
类型：发明
国别省市：广东;44
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。