数据监控方法及装置、存储介质、电子装置制造方法及图纸

本发明专利技术实施例提供了一种数据监控方法及装置、存储介质、电子装置，该方法，包括：从云数据库中获取存储的增量数据；在确定增量数据未与数据库中存储的数据匹配的情况下，合并增量数据与数据库中存储的数据，得到合并数据；将合并数据存储至数据库中，以监控合并数据。通过本发明专利技术，解决了数据传输的问题，达到提高数据传输速度的效果。据传输速度的效果。据传输速度的效果。

【技术实现步骤摘要】
数据监控方法及装置、存储介质、电子装置


[0001]本专利技术实施例涉及数据处理领域，具体而言，涉及一种数据监控方法及装置、存储介质、电子装置。

技术介绍

[0002]跨平台数据传输目前已在业界广泛使用。目前业界通用的几种离线数据同步方法是：应用程序接口(Application Program Interface，简称为API)接口、文件传送协议(File Transfer Protocol，简称为FTP)局域网、网盘/云盘；数据库之间全量/增量同步。
[0003]随着数据量的增大，上述方式不能满足大量数据量的连通，存在安全隐患。
[0004]针对上述技术问题，相关技术中尚未提出有效的解决方案。

技术实现思路

[0005]本专利技术实施例提供了一种数据监控方法及装置、存储介质、电子装置，以至少解决相关技术中数据传输的问题。
[0006]根据本专利技术的一个实施例，提供了一种数据监控方法，包括：
[0007]从云数据库中获取存储的增量数据；
[0008]在确定上述增量数据未与数据库中存储的数据匹配的情况下，合并上述增量数据与数据库中存储的数据，得到合并数据；
[0009]将上述合并数据存储至上述数据库中，以监控上述合并数据。
[0010]根据本专利技术的另一个实施例，提供了一种数据监控方法，包括：
[0011]向云数据库发送数据同步请求，其中，上述同步请求用于请求将确定的增量数据同步至云数据库中；
[0012]在收到同步响应消息的情况下，将上述同步响应消息发送至数据库，以指示上述数据库合并上述增量数据和上述数据库中存储的数据，得到合并数据，其中，上述同步响应消息用于表示上述增量数据成功同步至上述云数据库中；
[0013]监控上述合并数据。
[0014]根据本专利技术的另一个实施例，提供了一种数据监控装置，包括：
[0015]第一获取模块，用于从云数据库中获取存储的增量数据；
[0016]第一合并模块，用于在确定上述增量数据未与数据库中存储的数据匹配的情况下，合并上述增量数据与数据库中存储的数据，得到合并数据；
[0017]第一存储模块，用于将上述合并数据存储至上述数据库中，以监控上述合并数据。
[0018]在一个示例性实施例中，上述装置还包括：
[0019]第一接收模块，用于从云数据库中获取存储的增量数据之前，接收数据平台发送的同步消息，其中，上述同步消息用于表示上述增量数据同步至上述云数据库中；
[0020]第一访问模块，用于通过数据库连接JDBC访问上述云数据库。
[0021]在一个示例性实施例中，上述第一获取模块，包括：
[0022]第一抽取单元，用于通过大数据Sqoop从上述云数据库中抽取上述增量数据至上述数据库中，以获取上述增量数据。
[0023]在一个示例性实施例中，上述第一合并模块，包括：
[0024]第一监控单元，用于监控上述增量数据；
[0025]第一合并单元，用于在监控到上述增量数据未与上述数据库中存储的数据匹配的情况下，将上述增量数据合并至上述数据库中存储的数据，得到上述合并数据。
[0026]在一个示例性实施例中，上述装置还包括：
[0027]第一确定模块，用于在确定上述增量数据未与数据库中存储的数据匹配的情况下，合并上述增量数据与数据库中存储的数据，得到合并数据之后，确定合并数据的合并状态；
[0028]第一添加模块，用于添加上述合并状态的标识信息，以标识上述合并数据是否合并成功。
[0029]根据本专利技术的另一个实施例，提供了一种数据监控装置，包括：
[0030]第一发送模块，用于向云数据库发送数据同步请求，其中，上述同步请求用于请求将确定的增量数据同步至云数据库中；
[0031]第二发送模块，用于在收到同步响应消息的情况下，将上述同步响应消息发送至数据库，以指示上述数据库合并上述增量数据和上述数据库中存储的数据，得到合并数据，其中，上述同步响应消息用于表示上述增量数据成功同步至上述云数据库中；
[0032]第一监控数据，监控上述合并数据。
[0033]根据本专利技术的又一个实施例，还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
[0034]根据本专利技术的又一个实施例，还提供了一种电子装置，包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。
[0035]通过本专利技术，通过从云数据库中获取存储的增量数据；在确定增量数据未与数据库中存储的数据匹配的情况下，合并增量数据与数据库中存储的数据，得到合并数据；将合并数据存储至数据库中，以监控合并数据。实现了通过云数据库在数据传输前通过增量获取状态变化的数据，减少了全量同步的冗余和重复性。因此，可以解决数据传输的问题，达到提高数据传输速度的效果。
附图说明
[0036]图1是本专利技术实施例的一种数据监控方法的移动终端的硬件结构框图；
[0037]图2是根据本专利技术实施例的数据监控方法的流程图(一)；
[0038]图3是根据本专利技术实施例的数据监控方法的流程图(二)；
[0039]图4是根据本专利技术实施例的整体架构图；
[0040]图5是根据本专利技术实施例的数据链路图的示意图；
[0041]图6是根据本专利技术实施例的数据监控装置的结构框图(一)；
[0042]图7是根据本专利技术实施例的数据监控装置的结构框图(二)。
具体实施方式
[0043]下文中将参考附图并结合实施例来详细说明本专利技术的实施例。
[0044]需要说明的是，本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。
[0045]本申请实施例中所提供的方法实施例可以在移动终端、计算机终端或者类似的运算装置中执行。以运行在移动终端上为例，图1是本专利技术实施例的一种数据监控方法的移动终端的硬件结构框图。如图1所示，移动终端可以包括一个或多个(图1中仅示出一个)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)和用于存储数据的存储器104，其中，上述移动终端还可以包括用于通信功能的传输设备106以及输入输出设备108。本领域普通技术人员可以理解，图1所示的结构仅为示意，其并不对上述移动终端的结构造成限定。例如，移动终端还可包括比图1中所示更多或者更少的组件，或者具有与图1所示不同的配置。
[0046]存储器104可用于存储计算机程序，例如，应用软件的软件程序以及模块，如本专利技术实施例中的数据监控方法对应的计算机程序，处理器102通过运行存储在存储器104内的计算机程序，从而执行各种功能应用以及数据处理，即实现上述的方法。存储器104可包括本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据监控方法，其特征在于，包括：从云数据库中获取存储的增量数据；在确定所述增量数据未与数据库中存储的数据匹配的情况下，合并所述增量数据与数据库中存储的数据，得到合并数据；将所述合并数据存储至所述数据库中，以监控所述合并数据。2.根据权利要求1所述的方法，其特征在于，从云数据库中获取存储的增量数据之前，所述方法还包括：接收数据平台发送的同步消息，其中，所述同步消息用于表示所述增量数据同步至所述云数据库中；通过数据库连接JDBC访问所述云数据库。3.根据权利要求1所述的方法，其特征在于，从云数据库中获取存储的增量数据，包括：通过大数据Sqoop从所述云数据库中抽取所述增量数据至所述数据库中，以获取所述增量数据。4.根据权利要求1所述的方法，其特征在于，在确定所述增量数据未与数据库中存储的数据匹配的情况下，合并所述增量数据与数据库中存储的数据，得到合并数据，包括：监控所述增量数据；在监控到所述增量数据未与所述数据库中存储的数据匹配的情况下，将所述增量数据合并至所述数据库中存储的数据，得到所述合并数据。5.根据权利要求1所述的方法，其特征在于，在确定所述增量数据未与数据库中存储的数据匹配的情况下，合并所述增量数据与数据库中存储的数据，得到合并数据之后，所述方法还包括：确定合并数据的合并状态；添加所述合并状态的标识信息，以标识所述合并数据是否合并成功。6.一种数据监控方法，其特征在于，包括：向云数据库发送数据同步请求，其中，所述同步请求用于请求将确定的增量数据同步至云数据库中；在收到同...

【专利技术属性】
技术研发人员：施新梅，
申请(专利权)人：海尔智家股份有限公司，
类型：发明
国别省市：