Redis数据库迁移系统、方法和电子设备技术方案

本发明专利技术提供了一种Redis数据库迁移系统，所述系统包括：通信连接的处理器和存储器，所述存储器中存储有配置文件；所述处理器与一个或多个显示装置通信连接，用于执行计算机程序，基于所述配置文件在所述显示装置上显示配置页面，所述配置页面用于配置迁移信息，所述迁移信息至少包括数据库的ID、环境信息、连接端口、源数据库中需要迁移的数据、迁移所需要的线程、迁移工具、检测工具、检测次数和检测精度；所述处理器还用于根据获取的迁移信息执行相应的迁移操作。本发明专利技术还提供一种Redis数据库迁移方法和电子设备。本发明专利技术能够节约时间，提高迁移效率，并且在数据库迁移后会自动检测迁移效果，能够确保迁移准确性。能够确保迁移准确性。能够确保迁移准确性。

【技术实现步骤摘要】
Redis数据库迁移系统、方法和电子设备


[0001]本专利技术涉及数据迁移技领域，特别是涉及一种Redis数据库迁移系统、方法和电子设备。

技术介绍

[0002]Redis是一个开源的高性能键值对数据库，它通过提供多种键值数据类型来适应不同场景下的存储需求，并借助许多高层级的接口使其可以胜任如缓存、队列系统等不同的角色。Redis数据库应用广泛，可应用的业务场景类型多样，因此Redis数据库的环境配置也存在多样性。业务服务过程中，常常因为多种原因，需要将Redis数据库内的数据进行内部或外部的迁移。不同的迁移需求、不同的数据库配置之间，需要选用不同的数据迁移工具及命令算法。然而，现有技术中，在进行Redis数据库迁移时，往往需要技术人员逐一检测数据库的类型及配置，并根据迁移需求，挨个设计迁移方案，并分别装载相应的软件工具来执行数据迁移操作，耗费大量人力物力和时间，工作效率低，还存在较高的出现故障的可能性，且在数据库迁移后没有足够全面地检测迁移效果，迁移过程出现错误时也需通过人工检测及处理。然而，目前却没有可适用于多种数据库类型的高效的Redis数据库迁移系统。

技术实现思路

[0003]针对上述技术问题，本专利技术采用的技术方案为：
[0004]本专利技术实施例提供一种Redis数据库迁移系统，所述系统包括：通信连接的处理器和存储器，所述存储器中存储有配置文件；所述处理器与一个或多个显示装置通信连接，用于执行计算机程序，基于所述配置文件在所述显示装置上显示配置页面，所述配置页面用于供用户配置迁移信息，所述迁移信息至少包括数据库的ID、环境信息、连接端口、源数据库中需要迁移的数据、迁移所需要的线程、迁移工具、检测工具、检测次数和检测精度；
[0005]所述处理器还用于执行计算机程序，以实现如下步骤：
[0006]S100，基于获取的源数据库和目标数据库的ID和连接端口，选择对应的对接端口分别与对应的源数据库和目标数据库进行通信连接；
[0007]S200，基于获取的迁移所需要的线程为当前迁移任务分配对应的线程并基于获取的需要迁移的数据，为每个线程分配需要迁移的数据量，以及基于获取的环境信息为当前迁移任务选择对应的迁移方式；
[0008]S300，基于获取的需要迁移的数据从对应的源数据库获取对应的数据进行备份，得到备份数据，并分配给对应的线程；
[0009]S400，对于每个线程，利用当前迁移任务对应的迁移工具基于选择的迁移方式将对应的数据向所述目标数据库进行迁移，并在迁移过程中，实时获取源数据库中的变化数据，并进行存储；
[0010]S500，在检测到备份数据迁移完后，从存储的数据中获取与需要迁移的数据对应的变化数据并分配给对应的线程并向所述目标数据库进行迁移；执行S600；
[0011]S600，如果检测到源数据库中没有需要继续迁移的数据，执行S700；否则，从存储的数据中获取与需要迁移的数据对应的变化数据并分配给对应的线程并向所述目标数据库进行迁移，并执行S600；
[0012]S700，基于获取的检测次数和检测精度，利用当前迁移任务对应的检测工具对源数据库中需要迁移的数据和迁入目标数据库中的数据的一致性进行检测，如果一致，则退出控制程序，否则，执行S800；
[0013]S800，从源数据库中获取不一致的数据并分配给对应的线程并迁移到所述目标数据库中，并在迁移之后退出控制程序。
[0014]本专利技术另一实施例提供一种Redis数据库迁移方法，所述方法包括：
[0015]S10，获取迁移信息，所述迁移信息至少包括数据库的ID、环境信息、连接端口、源数据库中需要迁移的数据、迁移所需要的线程、迁移工具、检测工具、检测次数和检测精度；
[0016]S20，基于获取的迁移信息执行相应的迁移操作；
[0017]S20具体包括：
[0018]S201，基于获取的源数据库和目标数据库的ID和连接端口，选择对应的对接端口分别与对应的源数据库和目标数据库进行通信连接；
[0019]S202，基于获取的迁移所需要的线程为当前迁移任务分配对应的线程并基于获取的需要迁移的数据，为每个线程分配需要迁移的数据量，以及基于获取的环境信息为当前迁移任务选择对应的迁移方式；
[0020]S203，基于获取的需要迁移的数据从对应的源数据库获取对应的数据进行备份，得到备份数据，并分配给对应的线程；
[0021]S204，对于每个线程，利用当前迁移任务对应的迁移工具基于选择的迁移方式将对应的数据向所述目标数据库进行迁移，并在迁移过程中，实时获取源数据库中的变化数据，并进行存储；
[0022]S205，在检测到备份数据迁移完后，从存储的数据中获取与需要迁移的数据对应的变化数据并分配给对应的线程并向所述目标数据库进行迁移；执行S206；
[0023]S206，如果检测到源数据库中没有需要继续迁移的数据，执行S207；否则，从存储的数据中获取与需要迁移的数据对应的变化数据并分配给对应的线程并向所述目标数据库进行迁移，并执行S206；
[0024]S207，基于获取的检测次数和检测精度，利用当前迁移任务对应的检测工具对源数据库中需要迁移的数据和迁入目标数据库中的数据的一致性进行检测，如果一致，则退出控制程序，否则，执行S208；
[0025]S208，从源数据库中获取不一致的数据并分配给对应的线程并迁移到所述目标数据库中，并在迁移之后退出控制程序。
[0026]本专利技术另一实施例提供一种电子设备，包括处理器和存储器，所述存储器中存储有至少一条指令或至少一段程序，所述处理器用于执行所述至少一条指令或所述至少一段程序以实现权前述的方法。
[0027]本专利技术至少具有以下有益效果：
[0028]本专利技术能够在进行Redis数据库迁移时，能够自动检测数据库的类型及配置，并根据迁移需求，自动设计迁移方案，并自动装载相应的软件工具来执行数据迁移操作，能够节
约时间，提高迁移效率，并且在数据库迁移后会自动检测迁移效果，能够确保迁移准确性。
附图说明
[0029]为了更清楚地说明本专利技术实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0030]图1为本专利技术实施例提供的Redis数据库迁移系统执行迁移操作时的流程图。
具体实施方式
[0031]下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0032]本专利技术实施例提供一种Redis数据库迁移系统，用于自动实现Redis数据库的迁移。该系统可本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种Redis数据库迁移系统，其特征在于，所述系统包括：通信连接的处理器和存储器，所述存储器中存储有配置文件；所述处理器与一个或多个显示装置通信连接，用于执行计算机程序，基于所述配置文件在所述显示装置上显示配置页面，所述配置页面用于供用户配置迁移信息，所述迁移信息至少包括数据库的ID、环境信息、连接端口、源数据库中需要迁移的数据、迁移所需要的线程、迁移工具、检测工具、检测次数和检测精度；所述处理器还用于执行计算机程序，以实现如下步骤：S100，基于获取的源数据库和目标数据库的ID和连接端口，选择对应的对接端口分别与对应的源数据库和目标数据库进行通信连接；S200，基于获取的迁移所需要的线程为当前迁移任务分配对应的线程并基于获取的需要迁移的数据，为每个线程分配需要迁移的数据量，以及基于获取的环境信息为当前迁移任务选择对应的迁移方式；S300，基于获取的需要迁移的数据从对应的源数据库获取对应的数据进行备份，得到备份数据，并分配给对应的线程；S400，对于每个线程，利用当前迁移任务对应的迁移工具基于选择的迁移方式将对应的数据向所述目标数据库进行迁移，并在迁移过程中，实时获取源数据库中的变化数据，并进行存储；S500，在检测到备份数据迁移完后，从存储的数据中获取与需要迁移的数据对应的变化数据并分配给对应的线程并向所述目标数据库进行迁移；执行S600；S600，如果检测到源数据库中没有需要继续迁移的数据，执行S700；否则，从存储的数据中获取与需要迁移的数据对应的变化数据并分配给对应的线程并向所述目标数据库进行迁移，并执行S600；S700，基于获取的检测次数和检测精度，利用当前迁移任务对应的检测工具对源数据库中需要迁移的数据和迁入目标数据库中的数据的一致性进行检测，如果一致，则退出控制程序，否则，执行S800；S800，从源数据库中获取不一致的数据并分配给对应的线程并迁移到所述目标数据库中，并在迁移之后退出控制程序。2.根据权利要求1所述的系统，其特征在于，所述需要迁移的数据包括源数据库中的部分数据和全部数据。3.根据权利要求2所述的系统，其特征在于，在S400中，如果获取的需要迁移的数据为源数据库中的部分数据，则需要迁移的数据对应的变化数据为所述部分数据中发生变化的数据，如果获取的需要迁移的数据为源数据库中的全部数据，则需要迁移的数据对应的变化数据包括上一次迁移的数据中发生变化的数据和当前源数据库中新加入的数据。4.根据权利要求1所述的系统，其特征在于，所述检测精度包括检测数据的ID、检测数据的数据值以及检测数据的ID和数据值。5.根据权利要求1...

【专利技术属性】
技术研发人员：陈栋，魏兴华，李建辉，张文件，罗春，李春，张彦东，吴炎，臧冰凌，
申请(专利权)人：杭州沃趣科技股份有限公司，
类型：发明
国别省市：