一种数据同步方法、装置、电子设备及存储介质制造方法及图纸

本发明专利技术提供一种数据同步方法，包括：获取数据表的数据结构信息及所述数据表所属数据库的数据库信息；将所述数据结构信息和所述数据库信息写入所述数据表对应的数据对象文件；利用所述数据对象文件生成数据同步脚本，并利用所述数据同步脚本在所述数据表之间进行数据同步；可将数据表的基本信息写入该表对应的数据对象文件，进而可使用该文件为数据表生成能够高效进行数据同步的数据同步脚本，不仅能够降低数据同步任务对数据库的直接依赖，降低该任务与数据库之间的耦合程度，同时也能够提升数据同步任务的执行效率。本发明专利技术还提供一种数据同步装置、电子设备及存储介质。电子设备及存储介质。电子设备及存储介质。

【技术实现步骤摘要】
一种数据同步方法、装置、电子设备及存储介质


[0001]本专利技术涉及数据库领域，特别涉及一种数据同步方法、装置、电子设备及存储介质。

技术介绍

[0002]在数据同步过程中，数据同步任务通常直接访问数据表等物理数据对象，然而在不具有数据表及数据库具体信息的前提下，数据同步任务只能盲目且低效地在数据表中执行检索任务，而这不仅容易造成数据同步任务对数据表的频繁访问，同时在数据同步任务较多时，上述方式也容易降低数据库的运行效率。

技术实现思路

[0003]本专利技术的目的是提供一种数据同步方法、装置、电子设备及存储介质，可将数据表的基本信息写入该表对应的数据对象文件，进而利用该文件降低数据同步任务对数据库的直接依赖，并提升数据同步任务的执行效率。
[0004]为解决上述技术问题，本专利技术提供一种数据同步方法，包括：
[0005]获取数据表的数据结构信息及所述数据表所属数据库的数据库信息；
[0006]将所述数据结构信息和所述数据库信息写入所述数据表对应的数据对象文件；
[0007]利用所述数据对象文件生成数据同步脚本，并利用所述数据同步脚本在所述数据表之间进行数据同步。
[0008]可选地，所述获取数据表的数据结构信息，包括：
[0009]获取所述数据库的逻辑数据模型，并从所述逻辑数据模型中提取所述数据表的数据结构信息。
[0010]可选地，所述利用所述数据对象文件生成数据同步脚本，包括：
[0011]利用源数据表的数据对象文件所包含的数据结构信息和数据库信息，生成从所述源数据表中获取目标数据的数据查询脚本；
[0012]利用目的数据表的数据对象文件所包含的数据结构信息和数据库信息，生成将所述目标数据写入所述目的数据表的数据写入脚本；
[0013]根据所述源数据表和所述目的数据表的数据源类型获取对应的数据转换脚本。
[0014]可选地，所述利用所述数据同步脚本在所述数据表之间进行数据同步，包括：
[0015]在所述源数据表中执行所述数据查询脚本，得到所述目标数据；
[0016]利用所述数据转换脚本对所述目标数据进行格式转换；
[0017]在所述目的数据表中执行所述数据写入脚本，将完成格式转换的目标数据写入所述目的数据表。
[0018]可选地，所述数据对象文件为JSON文件。
[0019]可选地，在将所述数据结构信息和所述数据库信息写入所述数据表对应的数据对象文件之后，还包括：
[0020]利用所述数据对象文件在所述数据库中进行数据表创建。
[0021]本专利技术还提供一种数据同步装置，包括：
[0022]获取模块，用于获取数据表的数据结构信息及所述数据表所属数据库的数据库信息；
[0023]数据对象文件创建模块，用于将所述数据结构信息和所述数据库信息写入所述数据表对应的数据对象文件；
[0024]同步模块，用于利用所述数据对象文件生成数据同步脚本，并利用所述数据同步脚本在所述数据表之间进行数据同步。
[0025]可选地，所述获取模块，包括：
[0026]获取子模块，用于获取所述数据库的逻辑数据模型，并从所述逻辑数据模型中提取所述数据表的数据结构信息。
[0027]本专利技术还提供一种电子设备，包括：
[0028]存储器，用于存储计算机程序；
[0029]处理器，用于执行所述计算机程序时实现如上述所述的数据同步方法。
[0030]本专利技术还提供一种存储介质，所述存储介质中存储有计算机可执行指令，所述计算机可执行指令被处理器加载并执行时，实现如上述所述的数据同步方法。
[0031]本专利技术提供一种数据同步方法，包括：获取数据表的数据结构信息及所述数据表所属数据库的数据库信息；将所述数据结构信息和所述数据库信息写入所述数据表对应的数据对象文件；利用所述数据对象文件生成数据同步脚本，并利用所述数据同步脚本在所述数据表之间进行数据同步。
[0032]可见，本专利技术首先获取了数据表的数据结构信息及其所属数据库的数据库信息，并将数据结构信息和数据库信息写入了该数据表对应的数据对象文件中，其中数据结构信息可明确相关数据在数据表中的存放结构，而数据库信息则可明确数据库类型、数据库分区、分片等数据库配置情况，即数据对象文件中能够包含数据表的各种基本信息，可实现对数据表的可视化描述和定义，进而数据对象文件便可用于为数据表生成可高效进行数据同步的数据同步脚本，不仅能够降低数据同步任务对数据库的直接依赖，降低该任务与数据库之间的耦合程度，同时也能够提升数据同步任务的执行效率。本专利技术还提供一种数据同步装置、电子设备及存储介质。
附图说明
[0033]为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
[0034]图1为本专利技术实施例所提供的一种数据同步方法的路程图；
[0035]图2为本专利技术实施例所提供的一种数据同步装置的结构框图。
具体实施方式
[0036]为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合本专利技术实施例
中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0037]在数据同步过程中，数据同步任务通常直接访问数据表等物理数据对象，然而在不具有数据表及数据库具体信息的前提下，数据同步任务只能盲目且低效地在数据表中执行检索任务，而这不仅容易造成数据同步任务对数据表的频繁访问，同时在数据同步任务较多时，上述方式也容易降低数据库的运行效率。有鉴于此，本专利技术提供一种数据同步方法，可将数据表的基本信息写入该表对应的数据对象文件，进而利用该文件降低数据同步任务对数据库的直接依赖，并提升数据同步任务的执行效率。请参考图1，图1为本专利技术实施例所提供的一种数据同步方法的流程图，该方法可以包括：
[0038]S101、获取数据表的数据结构信息及数据表所属数据库的数据库信息。
[0039]在本专利技术实施例中，首先会获取数据表的数据结构信息及其所属数据库的数据库信息，其中数据结构信息可明确相关数据在数据表中的存放结构，而数据库信息则可明确数据库类型、数据库分区、分片等数据库配置情况，进而这些信息能够向外提供数据表的基本结构及数据库的配置情况，可便于外部工具生成高效的数据同步脚本。需要说明的是，本专利技术实施例并不限定数据结构信息的具体形式，只要能够描述数据表中存放数据的结构即可；本专利技术实施例也不限定具体的数据库信息，例如可以包含存储引擎的类型信息、数据库分片、分区、分布式的配置信息，当然也可以包含数据表的具体本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据同步方法，其特征在于，包括：获取数据表的数据结构信息及所述数据表所属数据库的数据库信息；将所述数据结构信息和所述数据库信息写入所述数据表对应的数据对象文件；利用所述数据对象文件生成数据同步脚本，并利用所述数据同步脚本在所述数据表之间进行数据同步。2.根据权利要求1所述的数据同步方法，其特征在于，所述获取数据表的数据结构信息，包括：获取所述数据库的逻辑数据模型，并从所述逻辑数据模型中提取所述数据表的数据结构信息。3.根据权利要求1所述的数据同步方法，其特征在于，所述利用所述数据对象文件生成数据同步脚本，包括：利用源数据表的数据对象文件所包含的数据结构信息和数据库信息，生成从所述源数据表中获取目标数据的数据查询脚本；利用目的数据表的数据对象文件所包含的数据结构信息和数据库信息，生成将所述目标数据写入所述目的数据表的数据写入脚本；根据所述源数据表和所述目的数据表的数据源类型获取对应的数据转换脚本。4.根据权利要求3所述的数据同步方法，其特征在于，所述利用所述数据同步脚本在所述数据表之间进行数据同步，包括：在所述源数据表中执行所述数据查询脚本，得到所述目标数据；利用所述数据转换脚本对所述目标数据进行格式转换；在所述目的数据表中执行所述数据写入脚本，将完成格式转换的目标数据写入...

【专利技术属性】
技术研发人员：陈学伟，王伟，孙涛，柴言胜，刘明刚，
申请(专利权)人：税友信息技术有限公司，
类型：发明
国别省市：