同构数据库之间的数据处理方法、装置、设备及存储介质制造方法及图纸

技术编号:36462581 阅读:13 留言:0更新日期:2023-01-25 23:02
本发明专利技术公开了一种同构数据库之间的数据处理方法、装置、设备及存储介质,所述同构数据库之间的数据处理方法,包括:在第二数据库切换到恢复模式的情况下,断开第二数据库与第一数据库之间的数据同步;第一数据库与第二数据库为同构数据库,在第一数据库为生产数据库的情况下,第二数据库为灾备数据库;控制第二数据库应用预先从第一数据库同步的第二元数据,并将预先从第一数据库获取的第二全局事务管理GTM数据写入第二数据库的本地文件,且重启第二数据库中的第二GTM线程将第二GTM数据写入内存;对第二数据库中的各第二数据节点进行一致性数据回滚。上述技术方案,通过保证数据的同源和一致性,提高了数据库系统的容灾能力。力。力。

【技术实现步骤摘要】
同构数据库之间的数据处理方法、装置、设备及存储介质


[0001]本专利技术涉及数据处理
,尤其涉及同构数据库之间的数据处理方法、装置、设备及存储介质。

技术介绍

[0002]随着信息技术的深入发展,数据库在金融行业的应用也越来越广泛。相应的,对数据库的稳定性提出了至高要求,尤其在数据的容灾能力方面。
[0003]现有的基于磁盘复制或者网络附属存储(Network Attached Storage,NAS)优化异地数据同步方式的方法,虽然减少了数据库在异地切换过程中数据丢失的情况,但是依然不能避免系统内其他组件异常对于系统的影响。如果异地和本地的网络之间的时延较大,无法保证异地数据和本地数据的一致;如果本地数据库全部宕机或者故障,异地数据库为了正常对外提供服务,在接管本地数据库的业务时,会丢失一部数据,无法保证数据的同步。所以,现有的基于磁盘复制或者NAS优化异地数据同步方式的方法对数据库系统的容灾能力没有本质的提升。如何提升数据库系统的容灾能力成为研究的重点。

技术实现思路

[0004]本专利技术提供了一种同构数据库之间的数据处理方法、装置、设备及存储介质,以提高数据库的容灾能力。
[0005]根据本专利技术的一方面,提供了一种同构数据库之间的数据处理方法,包括:
[0006]在第二数据库切换到恢复模式的情况下,断开第二数据库与第一数据库之间的数据同步;第一数据库与第二数据库为同构数据库,在第一数据库为生产数据库的情况下,第二数据库为灾备数据库;
[0007]控制第二数据库应用预先从第一数据库同步的第二元数据,并将预先从第一数据库获取的第二GTM数据写入第二数据库的本地文件,且重启第二数据库中的第二GTM线程将第二GTM数据写入内存;
[0008]对第二数据库中的各第二数据节点进行一致性数据回滚。
[0009]根据本专利技术的另一方面,提供了一种同构数据库之间的数据处理装置,包括:
[0010]数据同步断开模块,用于在第二数据库切换到恢复模式的情况下,断开第二数据库与第一数据库之间的数据同步;第一数据库与第二数据库为同构数据库,在第一数据库为生产数据库的情况下,第二数据库为灾备数据库;
[0011]数据存储模块,用于控制第二数据库应用预先从第一数据库同步的第二元数据,并将预先从第一数据库获取的第二GTM数据写入第二数据库的本地文件,且重启第二数据库中的第二GTM线程将第二GTM数据写入内存;
[0012]数据回滚模块,用于对第二数据库中的各第二数据节点进行一致性数据回滚。
[0013]根据本专利技术的另一方面,提供了一种电子设备,包括:
[0014]至少一个处理器;以及
[0015]与至少一个处理器通信连接的存储器;其中,
[0016]存储器存储有可被至少一个处理器执行的计算机程序,计算机程序被至少一个处理器执行,以使至少一个处理器能够执行本专利技术任一实施例的同构数据库之间的数据处理方法。
[0017]根据本专利技术的另一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,计算机指令用于使处理器执行时实现本专利技术任一实施例的同构数据库之间的数据处理方法。
[0018]本专利技术实施例的技术方案,通过在第二数据库切换到恢复模式的情况下,断开第二数据库与第一数据库之间的数据同步;第一数据库与第二数据库为同构数据库,在第一数据库为生产数据库的情况下,第二数据库为灾备数据库;控制第二数据库应用预先从第一数据库同步的第二元数据,并将预先从第一数据库获取的第二GTM数据写入第二数据库的本地文件,且重启第二数据库中的第二GTM线程将第二GTM数据写入内存;对第二数据库中的各第二数据节点进行一致性数据回滚。上述技术方案,在第一数据库为生产数据库的情况下,将同构的第二数据库作为灾备数据库接入第一数据库,保证了数据的同源,实现了第二数据库与第一数据库之间的数据同步;在第二数据库切换到恢复模式的情况下,通过控制第二数据库应用第二元数据和第二GTM数据,并对各第二数据节点进行一致性回滚,保证了数据的一致性,进而提高了数据库系统的容灾能力。
[0019]应当理解,本部分所描述的内容并非旨在标识本专利技术的实施例的关键或重要特征,也不用于限制本专利技术的范围。本专利技术的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0020]为了更清楚地说明本专利技术实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本专利技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0021]图1A是本专利技术涉及的一种同构数据库系统的结构示意图;
[0022]图1B是根据本专利技术实施例一提供的一种同构数据库之间的数据处理方法的流程图;
[0023]图1C是根据本专利技术实施例一提供的一种第二数据库恢复模式的结构示意图;
[0024]图1D是根据本专利技术实施例一提供的另一种第二数据库恢复模式的结构示意图;
[0025]图2A是根据本专利技术实施例二提供的一种同构数据库之间的数据处理方法的流程图;
[0026]图2B是根据本专利技术实施例二提供的一种第二数据库服务模式的结构示意图;
[0027]图2C是根据本专利技术实施例二提供的一种第二数据库模式切换的流程图;
[0028]图3是根据本专利技术实施例三提供的一种同构数据库之间的数据处理装置的结构示意图;
[0029]图4是实现本专利技术实施例的同构数据库之间的数据处理方法的电子设备的结构示意图。
具体实施方式
[0030]为了使本
的人员更好地理解本专利技术方案,下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分的实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本专利技术保护的范围。
[0031]需要说明的是,本专利技术的说明书和权利要求书及上述附图中的术语“第一”和“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本专利技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。本公开的技术方案中,所涉及的数据的收集、存储、使用、加工、传输、提供和公开等,均符合相关法律法规的规定,且不违背公序良俗。
[0032]为了便于理解,首先对本专利技术涉及的同构数据库系统进行说明。参见图1A所示的一种同构数据库系统,图中生产数据库可以是指可以正常对外提供服务的数据库;灾备数据库可以是本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种同构数据库之间的数据处理方法,其特征在于,包括:在第二数据库切换到恢复模式的情况下,断开所述第二数据库与第一数据库之间的数据同步;所述第一数据库与所述第二数据库为同构数据库,在所述第一数据库为生产数据库的情况下,所述第二数据库为灾备数据库;控制所述第二数据库应用预先从第一数据库同步的第二元数据,并将预先从所述第一数据库获取的第二GTM数据写入第二数据库的本地文件,且重启第二数据库中的第二GTM线程将第二GTM数据写入内存;对所述第二数据库中的各第二数据节点进行一致性数据回滚。2.根据权利要求1所述的方法,其特征在于,所述对第二数据库中的各第二数据节点进行一致性数据回滚,包括:获取第二数据库中各第二数据节点的数据同步时刻,并根据各数据同步时刻得到各第二数据节点的最小同步时刻,作为一致性时刻;根据所述一致性时刻,将各数据节点中晚于所述一致性时刻的数据进行回滚。3.根据权利要求1所述的方法,其特征在于,第二GTM数据通过如下方式同步得到:将第一数据库中的第一GTM数据上传到第一数据库中第一分布式应用程序协调服务zookeeper上;控制第二数据库中的第二zookeeper从第一zookeeper上读取所述第一GTM数据,作为所述第二GTM数据。4.根据权利要求1所述的方法,其特征在于,所述控制所述第二数据库应用预先从第一数据库同步的第二元数据,包括:将第二数据库中早于恢复时刻的第二元数据应用到元数据中,并从第二数据库中的关系数据库中删除早于所述恢复时刻的第二元数据。5.根据权利要求1

4任一项所述的方法,其特征在于,还包括:在第二数据库切换到服务模式的情况下,控制所述第二数据库起服,并获取一致性时刻;根据所述一致性时刻,对第二数据库中的第二数据节点与第一数据库中的第一数据节点进行差异化数据处理。6.根据权利要求5所述的方法,其特征在于,所述根据所述一致性时刻,对第二数据库中的第二数据节点与第一数据库中的第一数据节点进行差异化数据处理...

【专利技术属性】
技术研发人员:徐华飞
申请(专利权)人:金篆信科有限责任公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1