一种数据监控系统、方法、设备及存储介质技术方案

本发明专利技术公开了一种数据监控系统、方法、设备及存储介质，该系统包括：数据登记层、数据计算层和数据监控预警层，其中，数据登记层，用于基于待处理业务数据对应的业务主题，确定数据登记列表，并将数据登记列表发送给数据计算层；数据计算层，用于针对数据登记列表中的每个业务主题，基于与当前业务主题对应的业务监控周期，对与当前业务主题对应的当前待处理业务数据执行数据量监控操作，得到监控数据量差值；数据监控预警层，用于如果监控数据量差值不满足预设差值范围，则基于当前业务主题，执行预警操作。本发明专利技术实施例解决了需要人为监控数据量的问题，保证了数据监控的时效性和准确率。率。率。

【技术实现步骤摘要】
一种数据监控系统、方法、设备及存储介质


[0001]本专利技术涉及互联网
，尤其涉及一种数据监控系统、方法、设备及存储介质。

技术介绍

[0002]目前，各大公司均设置有数据仓库，为保护数据仓库中数据的安全性，通常会将数据仓库与第三方系统进行网络隔离，通过FTP(File Transfer Protocol，文件传输协议)服务器作为中介进行数据传输。
[0003]由于数据仓库或第三方系统放入FTP服务器中的数据是否存在异常，都需要人工查询文件大小才能判断，从而耗费大量人力成本以及无法保证数据的时效性。

技术实现思路

[0004]本专利技术提供了一种数据监控系统、方法、设备及存储介质，以解决人为监控发送到FTP服务器中的数据是否存在异常的问题，保证了数据监控的时效性和准确率。
[0005]根据本专利技术的一方面，提供了一种数据监控系统，该系统包括：数据登记层、数据计算层和数据监控预警层；
[0006]其中，所述数据登记层，用于基于待处理业务数据对应的业务主题，确定数据登记列表，并将所述数据登记列表发送给所述数据计算层；
[0007]所述数据计算层，用于针对所述数据登记列表中的每个业务主题，基于与当前业务主题对应的业务监控周期，对与所述当前业务主题对应的当前待处理业务数据执行数据量监控操作，得到监控数据量差值；
[0008]所述数据监控预警层，用于如果所述监控数据量差值不满足预设差值范围，则基于所述当前业务主题，执行预警操作。
[0009]根据本专利技术的另一方面，提供了一种数据监控方法，该方法包括：
[0010]基于待处理业务数据对应的业务主题，确定数据登记列表；
[0011]针对所述数据登记列表中的每个业务主题，基于与当前业务主题对应的业务监控周期，对与所述当前业务主题对应的当前待处理业务数据执行数据量监控操作，得到监控数据量差值；
[0012]如果所述监控数据量差值不满足预设差值范围，则基于所述当前业务主题，执行预警操作。
[0013]根据本专利技术的另一方面，提供了一种电子设备，所述电子设备包括：
[0014]至少一个处理器；以及
[0015]与所述至少一个处理器通信连接的存储器；其中，
[0016]所述存储器存储有可被所述至少一个处理器执行的计算机程序，所述计算机程序被所述至少一个处理器执行，以使所述至少一个处理器能够执行本专利技术任一实施例所述的数据监控方法。
[0017]根据本专利技术的另一方面，提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使处理器执行时实现本专利技术任一实施例所述的数据监控方法。
[0018]本专利技术实施例的技术方案，通过数据登记层登记待处理业务数据对应的业务主题，数据计算层针对数据登记列表中的每个业务主题，基于与当前业务主题对应的业务监控周期，对与当前业务主题对应的当前待处理业务数据执行数据量监控操作，得到监控数据量差值，数据监控预警层在检测到监控数据量差值不满足预设差值范围时，基于当前业务主题，执行预警操作，解决了人为监控发送到FTP服务器中的数据是否存在异常的问题，保证了数据监控的时效性和准确率。
[0019]应当理解，本部分所描述的内容并非旨在标识本专利技术的实施例的关键或重要特征，也不用于限制本专利技术的范围。本专利技术的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0020]为了更清楚地说明本专利技术实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0021]图1是根据本专利技术实施例一提供的一种数据监控系统的示意图；
[0022]图2是根据本专利技术实施例一提供的一种数据执行层的展示页面的示意图；
[0023]图3是根据本专利技术实施例二提供的一种数据监控系统的示意图；
[0024]图4是根据本专利技术实施例三提供的一种数据监控方法的流程图；
[0025]图5是根据本专利技术实施例四提供的一种电子设备的结构示意图。
具体实施方式
[0026]为了使本
的人员更好地理解本专利技术方案，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分的实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本专利技术保护的范围。
[0027]需要说明的是，本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本专利技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
[0028]实施例一
[0029]图1是根据本专利技术实施例一提供的一种数据监控系统的示意图，本实施例可适用于对发送到FTP服务器中的业务数据进行监控的情况，该数据监控系统可以采用硬件和/或
软件的形式实现，该数据监控系统可配置于终端设备中。如图1所示，该系统包括：数据登记层110、数据计算层120和数据监控预警层130；
[0030]其中，数据登记层110，用于基于待处理业务数据对应的业务主题，确定数据登记列表，并将数据登记列表发送给数据计算层120；
[0031]数据计算层120，用于针对数据登记列表中的每个业务主题，基于与当前业务主题对应的业务监控周期，对与当前业务主题对应的当前待处理业务数据执行数据量监控操作，得到监控数据量差值；
[0032]数据监控预警层130，用于如果监控数据量差值不满足预设差值范围，则基于当前业务主题，执行预警操作。
[0033]其中，具体的，待处理业务数据可以是待发送到FTP服务器中的数据。业务主题可用于表征待处理业务数据所属的业务领域，示例性的，业务领域可以是企业或部门。举例而言，业务主题可以是银行A、银行B或银行C等等。其中，具体的，数据登记列表中记录有至少一个待处理业务数据分别对应的业务主题。
[0034]其中，业务监控周期可以是时间段周期或时间点周期，示例性的，业务监控周期可以是20天，或者，业务监控周期也可以是每周一或每月2号等等。此处对业务监控周期的具体数值不作限定，用户可根据实际需求进行设置。
[0035]在一个实施例中，可选的，该系统还包括数据执行层，用于基于预设主题周期列表，确定与数据登记列表中至少一个业务主题分别对应的业务监控周期，并将各业务监控周期发送给数据计算层本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据监控系统，其特征在于，包括：数据登记层、数据计算层和数据监控预警层；其中，所述数据登记层，用于基于待处理业务数据对应的业务主题，确定数据登记列表，并将所述数据登记列表发送给所述数据计算层；所述数据计算层，用于针对所述数据登记列表中的每个业务主题，基于与当前业务主题对应的业务监控周期，对与所述当前业务主题对应的当前待处理业务数据执行数据量监控操作，得到监控数据量差值；所述数据监控预警层，用于如果所述监控数据量差值不满足预设差值范围，则基于所述当前业务主题，执行预警操作。2.根据权利要求1所述的系统，其特征在于，所述数据计算层，具体用于：如果当前运行时间满足业务监控周期，或者，当前运行时间与上一运行时间的计时周期满足业务监控周期，则确定与所述当前运行时间对应的当前待处理业务数据对应的当前数据量；获取所述当前待处理业务数据对应的上一待处理业务数据的上一数据量，并基于所述当前数据量和所述上一数据量，确定监控数据量差值；其中，所述上一待处理业务数据为上一运行时间获取到的待处理业务数据。3.根据权利要求1所述的系统，其特征在于，所述数据登记列表中还包含与至少一个业务主题分别对应的至少一个业务分类信息、与各业务分类信息分别对应的数据库名称以及业务数据表名称，所述当前待处理业务数据包含与至少一个业务分类信息分别对应的当前业务数据表，相应的，所述数据计算层，还用于：如果当前运行时间满足业务监控周期，或者，当前运行时间与上一运行时间的计时周期满足业务监控周期，则针对与所述当前业务主题对应的每个业务分类信息，确定所述业务分类信息对应的数据库名称对应的当前数据库，并基于所述业务分类信息对应的业务数据表名称，从所述当前数据库中获取当前业务数据表；其中，所述当前业务数据表为与所述当前运行时间对应的业务数据表。4.根据权利要求3所述的系统，其特征在于，所述数据计算层，具体用于：针对每个当前业务数据表，确定所述当前业务数据表的当前数据量；获取与所述当前业务数据表对应的上一业务数据表对应的上一数据量；其中，所述上一业务数据表为上一运行时间获取到的业务数据表；基于所述当前数据量...

【专利技术属性】
技术研发人员：余辉，
申请(专利权)人：深圳市酷开网络科技股份有限公司，
类型：发明
国别省市：