【技术实现步骤摘要】
本专利技术涉及计算机领域，尤其涉及一种关系型数据库至图数据库的数据迁移方法。
技术介绍
1、在现实应用中，关系型数据库(mysql、orac le、sql server)是一种基于关系模型的数据库管理系统，使用表格或关系来存储和组织数据，其中每个表格包含多个行和列，关系型数据库使用结构化查询语言(sql)进行数据操作和查询；图数据库(neo4j、arangodb、janusgraph)是一种基于图结构的数据库管理系统，使用图来存储和表示数据，其中节点表示实体，边表示实体之间的关系，图数据库使用图查询语言进行数据操作和查询，适用于处理复杂的关系和连接性，两种数据库都被广泛使用。
2、然而，由于关系型数据库的表结构和图数据库的图结构之间存在差异，需要进行数据迁移以实现从关系型数据库到图数据库的转换，因此，关系型数据库至图数据库的数据迁移方法应运而生，关系型数据库至图数据库的数据迁移方法旨在解决以下问题：数据结构转换问题，关系型数据库的表结构需要转换为图数据库的图结构，数据语义转换问题：关系型数据库中的数据语义需要转换为图数据库中的节点和边的语义，确保数据的准确性和一致性；数据量级转换问题：关系型数据库中的数据量级需要转换为图数据库中的节点和边的数量，保证数据的完整性和性能。
3、关系型数据库和图数据库在数据存储和查询方式上有明显的差异，关系型数据库适用于结构化数据和事务处理，通过表格和sql查询来处理数据，而图数据库适用于处理复杂的关系和连接性，通过图结构和图查询语言来表示和查询数据。图数据库在处理关系型数据
4、中国专利公开号：cn104504012a，公开了一种基于逆拓扑的数据库数据迁移方法，包括以下步骤：根据需要迁移的数据库，获取其拓扑关系图；根据拓扑关系图和模式转换模型，得出迁移过程中的扩展顺序序列；根据得到的扩展顺序序列，将数据和模式迁移至nosql中，迁移前的sql数据库中的任何一个join查询都能在迁移后的nosql数据库中的单个表内查到正确结果，不再需要对多个表进行访问，有效提高了对迁移后nosql数据库的查询效率。
5、由此可见，现有技术的关系型数据库至图数据库的数据迁移方法过程中存在
6、1、由于关系型数据库和图数据库之间的结构差异，数据转换过程相对复杂，需要考虑多种转换规则和算法的现有技术数据转换复杂的问题；
7、2、在数据迁移过程中，由于数据结构和语义的转换，可能导致数据一致性的问题，需要进行严格的验证和测试；
8、3、数据迁移过程可能对系统性能产生一定的影响，特别是在处理大规模数据时，需要考虑优化策略和并发处理的问题。
技术实现思路
1、为此，本专利技术提供一种关系型数据库至图数据库的数据迁移方法，用以克服现有技术中在面对关系型数据库至图数据库的数据迁移时对于数据迁移能力低导致迁移的效率和质量不高的问题。
2、实现上述目的，本专利技术提供一种关系型数据库至图数据库的数据迁移方法，包括以下步骤：
3、s1、特征获取模块通过与关系型数据库进行交互，获取关系型数据库中对应的数据特征；
4、s2、数据分析模块计算关系型数据库的复杂程度并根据所述复杂程度确定数据迁移方式；
5、s3、所述数据分析模块中的合格性判断单元判定在数据迁移过程中合格性，所述数据分析模块中的响应评价单元评价数据迁移过程中所述数据迁移快慢；
6、s4、调整模块中的调整单元在对应迁移方式下对迁移过程进行调整，并由所述调整模块中的优化单元确定对所述迁移方式的优化方式；
7、s5、迁移方案生成模块根据所述数据分析模块分析得到的关系型数据库的特征和结果，生成适合所述图数据库的数据模型和结构，并输出所述图数据库的迁移方案，最终所述关系型数据库中对应的数据特征的获取和关系型数据库的数据迁移过程由控制模块进行控制；
8、其中，所述关系型数据库中的数据特征包括节点数量、索引的类型数量、索引的数量和数据类型数量；
9、本专利技术实施例中，所述特征获取模块获取关系型数据库中对应的数据特征，数据分析模块计算关系型数据库的复杂程度进而确定数据迁移方式，在迁移过程中对迁移的合格性和响应快慢进行评价，调整模块在对应迁移方式下对迁移过程进行调整，并确定对所述迁移方式的优化方式，最终生成迁移方案。
10、进一步地，所述数据分析模块对所述关系型数据库的复杂程度进行分析，以根据复杂程度评价值对所述关系型数据库的迁移难度进行初步评价；
11、进一步地，当所述数据分析模块根据所述复杂程度确定数据迁移方式时，所述数据分析模块将表数据的复杂程度和预设复杂程度进行比对以确定所述关系型数据至图数据的若干迁移方式，其中若干所述迁移方式包括在复杂程度小于预设复杂程度时确定以第一迁移方式对所述关系型数据至图数据进行数据迁移和在复杂程度大于等于预设复杂程度时确定以第二迁移方式对所述关系型数据至图数据进行数据迁移；
12、进一步地，当复杂程度小于预设复杂程度确定以第一迁移方式迁移所述数据时，所述数据分析模块提取关系型数据库的表中若干第一特征，并针对单个第一特征提取与该单个第一特征对应的关联特征，将单个第一特征对应的关联特征的数据量进行确定，以该数据量递增顺序建立单个第一特征与所述关联特征的拓扑关系，将表中的若干特征的拓扑关系中相同特征连接以生成表拓扑关系，并整体迁移至图数据库中；
13、进一步地，当复杂程度大于等于预设复杂程度确定以第二迁移方式迁移所述数据时，所述数据分析模块提取关系型数据库的表中若干特征，并针对单个特征提取与该单个特征对应的关联特征，建立针对单个特征和关联特征的拓扑关系，确定相同特征数量，以根据该相同特征数量确定连接各特征的拓扑关系的连接方式；若所述特征数量全相同，则合并一个拓扑关系；若所述特征数量部分相同，则以相同特征数量的递减为顺序进行连接，生成图结构。其中，所述关联特征是指在关系型数据库中，数据以表的形式进行组织和存储，每个表包含一个或多个列，每个列表示一个特定的数据属性，该关联特征是针对某个主特征而言的其他相关特征。例如，对于一个包含员工信息的数据库表，所述数据库表的列包括员工id、姓名、职位、部门，假设将职位作为主特征，与职位列相关联的其他特征可能包括部门、薪资、工作地点。关联特征提供了与职位有关的其他有用的信息，可以使用关联关系的相关性来建立关联特征，可以通过使用join操作将多个表连接在一起，进而检索与给定主特征相关联的其他特征的数据。
14、进一步地，当所述数据分析模块中的合格性判断单元判定数据迁移过程中合格性时，所述数据分析模块对所述迁移方式的数据迁移过程进行评价，并确定所述数据迁移的合格性以调整相应迁移方式下建立的拓扑关系；若边的数量小于预设阈值，则判定所述数据迁移合格；本文档来自技高网...
【技术保护点】
1.一种关系型数据库至图数据库的数据迁移方法，其特征在于，包括以下步骤：
2.根据权利要求1所述的关系型数据库至图数据库的数据迁移方法，其特征在于，所述数据分析模块对所述关系型数据库的复杂程度进行分析，以确定所述关系型数据库的复杂程度评价值。
3.根据权利要求2所述的关系型数据库至图数据库的数据迁移方法，其特征在于，当所述数据分析模块根据所述复杂程度确定数据迁移方式时，所述数据分析模块将表数据的复杂程度和预设复杂程度进行比对以确定所述关系型数据至图数据的若干迁移方式，其中若干所述迁移方式包括在复杂程度小于预设复杂程度时确定以第一迁移方式对所述关系型数据至图数据进行数据迁移和在复杂程度大于等于预设复杂程度时确定以第二迁移方式对所述关系型数据至图数据进行数据迁移。
4.根据权利要求3所述的关系型数据库至图数据库的数据迁移方法，其特征在于，当确定以第一迁移方式迁移数据时，所述数据分析模块提取关系型数据库的表中若干第一特征，并针对单个第一特征提取与该单个第一特征对应的关联特征，将单个第一特征对应的关联特征的数据量进行确定，以该数据量递增顺序建立单个第一
5.根据权利要求4所述的关系型数据库至图数据库的数据迁移方法，其特征在于，当确定以第二迁移方式迁移所述数据时，所述数据分析模块提取关系型数据库的表中若干特征，并针对单个特征提取与该单个特征对应的关联特征，建立针对单个特征和关联特征的拓扑关系，确定相同特征数量，以根据该相同特征数量确定连接各特征的拓扑关系的连接方式；若所述特征数量全相同，则合并一个拓扑关系；若所述特征数量部分相同，则以相同特征数量的递减为顺序进行连接，生成图结构。
6.根据权利要求5所述的关系型数据库至图数据库的数据迁移方法，其特征在于，当所述数据分析模块中的合格性判断单元判定数据迁移过程中合格性时，所述数据分析模块对所述迁移方式的数据迁移过程进行评价，并确定所述数据迁移的合格性以调整相应迁移方式下建立的拓扑关系；若边的数量小于预设阈值，则判定所述数据迁移合格；若边的数量大于预设阈值，则判定所述数据迁移不合格，并针对该表中的若干所述第一特征增加第二特征。
7.根据权利要求6所述的关系型数据库至图数据库的数据迁移方法，其特征在于，当数据分析模块中的响应评价单元评价数据迁移过程中所述数据迁移快慢时，所述响应评价单元在相应迁移方式下对所述数据迁移的响应进行分析，以根据响应评价值对所述数据迁移的状态进行初步评价，设定
8.根据权利要求7所述的关系型数据库至图数据库的数据迁移方法，其特征在于，当所述调整模块中的调整单元在对应迁移方式下对迁移过程进行调整时，所述调整单元将图数据库和关系型数据库在相同查询场景下平均查询响应时间和每秒查询请求数构成的响应评价值和预设响应评价值进行比对以确定是否对迁移过程进行优化，若响应评价值小于预设响应评价值，所述调整单元确定对分析方式进行优化。
9.根据权利要求8所述的关系型数据库至图数据库的数据迁移方法，其特征在于，当所述调整模块中的优化单元确定对所述迁移方式的优化方式时，所述优化单元将结构复杂程度和预设结构复杂程度的差值和预设差值进行比对，以确定对迁移方式的若干优化方式。
10.根据权利要求9所述的关系型数据库至图数据库的数据迁移方法，其特征在于，当所述调整模块中的优化单元确定以第一优化方式优化所述迁移方式时，将表中的多个第一特征和第二特征进行数据清洗，删除错误数据并根据删除的数据比例和预设数据比例进行比对，以根据比对结果确定所述预设阈值的若干调节系数；当所述调整模块中的优化单元确定以第一优化方式优化所述迁移方式时，根据将表中的全部特征进行数据清洗，删除错误数据并将删除的数据比例和预设数据比例进行比对，以确定所述预设阈值的若干调节系数。
...【技术特征摘要】
1.一种关系型数据库至图数据库的数据迁移方法，其特征在于，包括以下步骤：
2.根据权利要求1所述的关系型数据库至图数据库的数据迁移方法，其特征在于，所述数据分析模块对所述关系型数据库的复杂程度进行分析，以确定所述关系型数据库的复杂程度评价值。
3.根据权利要求2所述的关系型数据库至图数据库的数据迁移方法，其特征在于，当所述数据分析模块根据所述复杂程度确定数据迁移方式时，所述数据分析模块将表数据的复杂程度和预设复杂程度进行比对以确定所述关系型数据至图数据的若干迁移方式，其中若干所述迁移方式包括在复杂程度小于预设复杂程度时确定以第一迁移方式对所述关系型数据至图数据进行数据迁移和在复杂程度大于等于预设复杂程度时确定以第二迁移方式对所述关系型数据至图数据进行数据迁移。
4.根据权利要求3所述的关系型数据库至图数据库的数据迁移方法，其特征在于，当确定以第一迁移方式迁移数据时，所述数据分析模块提取关系型数据库的表中若干第一特征，并针对单个第一特征提取与该单个第一特征对应的关联特征，将单个第一特征对应的关联特征的数据量进行确定，以该数据量递增顺序建立单个第一特征与所述关联特征的拓扑关系，将表中的若干特征的拓扑关系中相同特征连接以生成表拓扑关系，并整体迁移至图数据库中。
5.根据权利要求4所述的关系型数据库至图数据库的数据迁移方法，其特征在于，当确定以第二迁移方式迁移所述数据时，所述数据分析模块提取关系型数据库的表中若干特征，并针对单个特征提取与该单个特征对应的关联特征，建立针对单个特征和关联特征的拓扑关系，确定相同特征数量，以根据该相同特征数量确定连接各特征的拓扑关系的连接方式；若所述特征数量全相同，则合并一个拓扑关系；若所述特征数量部分相同，则以相同特征数量的递减为顺序进行连接，生成图结构。
6.根据权利要求5所述的关系型数据库至图数据库的数据迁移方法，其特征在于，当所述数据分析模块中的合格性判断...
【专利技术属性】
技术研发人员：郝磊，刘戈杰，
申请(专利权)人：上海栈略数据技术有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。