一种数据迁移方法、数据迁移装置及数据迁移系统制造方法及图纸

一种数据迁移方法、数据迁移装置及数据迁移系统，所述方法包括：从关系数据库中获取关系数据库表SCHEMA信息；将所述SCHEMA信息映射成非关系数据库XML模型，并在映射关系表中记录对应的映射关系；按照所述映射关系表，将关系数据库的数据导入带非关系数据库XML模型中。本发明专利技术解决把关系数据库中的数据平滑迁移到非关系数据库中的技术问题，实现了业务数据的平滑切换。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及数据处理
，特别涉及一种数据迁移方法、数据迁移装置及数据迁移系统。
技术介绍
随着数据库应用范围的扩大，关系数据库的功能得到扩展，但是复杂度和使用成本也随之大幅提高。很多应用并不需要关系数据库的复杂功能，同时受关系数据库的数据模型限制而无法针对性地优化。特别是随着web2. 0业务的发展和网络内容的暴增，对数据库系统产生了新的需求，这些需求要求数据库具有海量存储与并发、弹性扩展、高可靠、高可用、低成本、弹性表结构等特征，但是，传统的关系数据库无法实现这些特征。基于此，业界提出了各种no sql非关系数据库，这类数据库具有自组织、自管理、低成本、弹性可扩展、海量存储、高并发访问、查询关系简单等特性。出于成本、可扩展性、效率、自主功能定制等方面的考虑，当前很多业务都希望尽可能将关系数据库中的数据切换到非关系数据库。但是，由于数据模型的差异，关系数据库中的数据无法直接迁移到非关系数据库。在对现有技术的研究和实践过程中，本专利技术的专利技术人发现，目前业界需要一种实现关系数据库与非关系数据库之间的数据模型的映射。
技术实现思路
有鉴于此，本专利技术实施例提供一种数据迁移方法、装置及数据迁移系统，可以把关系数据库中的数据平滑迁移到非关系数据库中。本专利技术实施例提供一种数据迁移的方法，所述方法包括从关系数据库中获取关系数据库表SCHEMA信息；将所述SCHEMA信息映射成非关系数据库XML模型，并在映射关系表中记录对应的映射关系；按照所述映射关系表中记录的映射关系，将关系数据库的数据导入非关系数据库中。本专利技术实施例还提供一种数据迁移装置，所述装置包括第一获取单元，用于从关系数据库中获取关系数据库库表SCHEMA信息；映射单元，用于将所述SCHEMA信息映射成非关系数据库XML模型，并在映射关系表中记录对应的映射关系；数据迁移单元，用于按照所述映射关系表中记录的映射关系，将关系数据库的数据导入带非关系数据库中。本专利技术实施例再提供一种数据迁移系统，至少包括一个关系数据库和一个非关系数据库，还包括数据迁移装置，用于从关系数据库中获取关系数据库库表SCHEMA信息；将所述SCHEMA信息映射成非关系数据库XML模型，并在映射关系表中记录对应的映射关系； 按照所述映射关系表中记录的映射关系，将关系数据库的数据导入带非关系数据库中。由上述可知，本专利技术实施例提出了一种关系数据库与非关系数据库间数据迁移的方法、数据迁移装置及数据迁移系统，可以用于把传统关系数据库的数据迁移到非关系数据库等中，实现了数据业务的平滑迁移。本专利技术实施例中的数据迁移是自动的、不但保证了迁移的可靠性，还提高了数据迁移的效率，从而实现了业务的平滑切换。附图说明图1为本专利技术实施例1提供的一种数据迁移的方法的流程图；图2为本专利技术实施例2提供的一种数据迁移的方法的流程图；图3为本专利技术实施例提供的一种各种模式下SCHEMA映射的流程图；图4为本专利技术实施例提供的一种数据导入流程的流程图；图5为本专利技术实施例提供的一种数据迁移装置的结构示意图；图6为本专利技术实施例提供饿一种数据迁移系统的结构示意图；图7为本专利技术实施例提供饿一种数据迁移系统的应用实例结构图。具体实施例方式为了使本
的人员更好地理解本专利技术实施例的方案，下面结合附图和实施方式对本专利技术实施例作进一步的详细说明。为了使本
的人员更好地理解本专利技术实施例的方案，下面结合附图和实施方式对本专利技术实施例作进一步的详细说明。请参阅图1，为本专利技术实施例1提供一种数据迁移方法的流程图，所述方法包括步骤101 从关系数据库中获取关系数据库表SCHEMA信息；—种获取的过程是，SCHEMA映射引擎先向所述关系数据库中发送获取SCHEMA信息的请求；接收所述关系数据库反馈的所述SCHEMA信息。步骤102 将所述SCHEMA信息映射成非关系数据库XML模型，并在映射关系表中记录对应的映射关系；也就是说，SCHEMA映射引擎将所述SCHEMA信息映射成关系数据库XML模型；按照 SCHEMA的定义，将所述关系数据库XML模型映射为非关系数据库XML模型，并在映射关系表中记录对应的映射关系。其中，将所述关系数据库XML模型映射为非关系数据库XML模型包括将所述关系数据库XML模型配置为规范化处理模式或者非规范化处理模式，其中，当配置为规范化处理模式时，将关系数据库中的每个表都映射为非关系数据库中一个column family，并在映射关系表中记录对应的映射关系；当配置为非规范化处理模式时，将多个关系数据库中的表映射为非关系数据库中一个 column family。步骤103 按照所述映射关系表，将关系数据库的数据导入带非关系数据库XML模型中。优选的，在上述实施例的步骤101之前，所述方法还可以包括在所述非关系数据库中增加非关系数据对象表SCHEMA的定义；具体包括增加对column family的主键的 SCHEMA约束定义；增加对column family的具体列的SCHEMA约束定义；将一个或多个联合主键的关系数据库表中映射为非关系数据库中的super column family。优选的，在上述实施例的步骤101之前，所述方法还可以包括建立关系数据库中的关系表与非关系数据库的非关系表的映射关系表，并在映射关系表中记录上述SCHEMA 定义的映射关系。其中，步骤103中，按照所述映射关系表中记录的映射关系，将关系数据库的数据导入带非关系数据库中具体包括根据所述非关系数据库XML模型生成数据定义命令；向非关系数据库发送所述数据定义命令，创建非关系数据库中的SCHEMA ；从所述关系数据库中获取数据集具体包括 扫描非关系数据库XML模型和映射关系表，生成SQL查询语句，利用所述SQL查询语句从所述关系数据库中获取数据集；根据所述映射关系表中记录的对应映射关系将所述数据集导入所述非关系数据库的SCHEMA中。优选的，在步骤103之后，所述方法还可以包括在所述关系数据库XML模型配置为规范化处理模式或者非规范化处理模式时，对映射关系表中记录中的映射关系进行优化配置。本专利技术实施例提出了一种关系数据库与非关系数据库间数据迁移的方法，可以用于把传统关系数据库的数据迁移到非关系数据库(比如新兴的类Bigtable数据模型)等中，实现了数据业务的平滑迁移。本专利技术实施例中的数据迁移是自动的、不但保证了迁移的可靠性，还提高了数据迁移的效率，从而实现了业务的平滑切换。还请参阅图2，为本专利技术实施例2提供一种数据迁移方法的流程图，所述方法包括步骤201 在非关系数据库中增加SCHEMA定义；在该实施例中，非关系数据库以类Bigtable数据为例，但并不限于此，也就是说， SCHEMA映射引擎先在类Bigtable数据模型的非关系数据库中增加SCHEMA定义，其具体的过程为由于目前的类Bigtable数据模型的非关系数据库只能定义Keyspace (键值空间) 和column family (列族)，从概念上这两个定义可以对应关系数据库中的db (数据库)和表Table。为了实现数据库中的关系表到非关系数据库中的非关系表的映射，需要在非关系数据库中增加非关系数据库表的SCHEMA约束定义，具体的定义过程为首先，增加对column family本文档来自技高网...

【技术保护点】
１．一种数据迁移的方法，其特征在于，包括：从关系数据库中获取关系数据库表ＳＣＨＥＭＡ信息；将所述ＳＣＨＥＭＡ信息映射成非关系数据库ＸＭＬ模型，并在映射关系表中记录对应的映射关系；按照所述映射关系表中记录的映射关系，将关系数据库的数据导入非关系数据库中。

【技术特征摘要】
【国外来华专利技术】

【专利技术属性】
技术研发人员：李丽娟，
申请(专利权)人：华为技术有限公司，
类型：发明
国别省市：94