基于人工智能的数据迁移方法及相关设备技术

技术编号:32483853 阅读:19 留言:0更新日期:2022-03-02 09:48
本申请提出一种基于人工智能的数据迁移方法、装置、电子设备及存储介质,基于人工智能的数据迁移方法包括:获取源数据库和目标数据库的数据库信息;基于所述数据库信息配置所述源数据库和所述目标数据库的表结构以获取表结构对应关系;基于所述表结构对应关系匹配所述源数据库和所述目标数据库以获取语句变动集;基于所述语句变动集和聚类算法划分所述源数据库的访问流量信息以获取同步时间集;基于所述语句变动集和所述同步时间集同步所述源数据库中的数据至所述目标数据库以完成数据迁移。本申请可以根据源数据库的访问流量分段进行数据迁移,提高系统正常运转的效率。提高系统正常运转的效率。提高系统正常运转的效率。

【技术实现步骤摘要】
基于人工智能的数据迁移方法及相关设备


[0001]本申请涉及人工智能
,尤其涉及一种基于人工智能的数据迁移方法、装置、电子设备及存储介质。

技术介绍

[0002]随着信息技术的发展,数据的使用量和交换量都在急剧攀升,很多公司为了提升性能、增加业务,难免会对数据库进行数据迁移。数据库之间进行数据迁移时,现有技术通常先通过解析源数据库的表结构定义,解析成目标数据库支持的表结构并在目标数据库中生成新表才能对数据进行迁移。
[0003]然而现有技术虽然可以实现多种数据库的迁移,但是数据迁移的过程较长,迁移效率较低,导致源数据库在迁移过程中无法被使用,进而严重影响系统功能的正常运转效率。

技术实现思路

[0004]鉴于以上内容,有必要提出一种基于人工智能的数据迁移方法及相关设备,以解决如何提高数据库迁移过程中系统的正常运转效率这一技术问题,其中,相关设备包括基于人工智能的数据迁移装置、电子设备及存储介质。
[0005]本申请提供一种基于人工智能的数据迁移方法,包括:
[0006]获取源数据库和目标数据库的数据库信息;
[0007]基于所述数据库信息配置所述源数据库和所述目标数据库的表结构以获取表结构对应关系;
[0008]基于所述表结构对应关系判断所述源数据库和所述目标数据库的表结构信息是否一致以获取迁移表结构;
[0009]基于所述迁移表结构匹配所述源数据库和所述目标数据库以获取语句变动集;
[0010]基于所述语句变动集和聚类算法划分所述源数据库的访问流量信息以获取同步时间集;
[0011]基于所述语句变动集和所述同步时间集同步所述源数据库中的数据至所述目标数据库以完成数据迁移。
[0012]如此,通过获取源数据库的信息构建符合目标数据库类型的表结构,并根据表结构信息匹配出源数据库和目标数据库之间的语句变动信息以作为待迁移数据,同时结合源数据库的访问流量将待迁移数据在尽量不影响系统正常运转的时间段内进行分段迁移,从而有效提高系统正常运转的效率。
[0013]在一些实施例中,所述获取源数据库和目标数据库的数据库信息包括:
[0014]依据web页面接收用户输入的所述源数据库的数据库信息,所述源数据库的数据库信息包括连接名称、数据库类型、模式、主机IP、数据库名称、端口、用户名以及密码;
[0015]依据web页面接收用户输入的所述目标数据库的数据库信息,所述目标数据库的
数据库信息包括数据库表名、同步方式、连接名称、数据库类型、主机IP、数据库名称、端口、用户名、密码以及目标库表名。
[0016]如此,在进行数据库迁移的过程中不需要安装客户端,仅仅通过打开的一个web页面进行配置即可方便的完成数据库的迁移,同时用户通过web页面确定源数据库和目标数据库的信息可以有效提升用户的人机交互体验感,便于用户自定义灵活配置数据库信息。
[0017]在一些实施例中,所述基于所述数据库信息配置所述源数据库和所述目标数据库的表结构以获取表结构对应关系包括:
[0018]基于所述数据库信息判断所述源数据库和所述目标数据库的类型是否一致以获取判断结果,所述判断结果为一致和不一致;
[0019]若所述判断结果为一致,则配置所述源数据库的表结构和所述目标数据库的表结构的对应关系;
[0020]若所述判断结果为不一致,则将所述源数据库的表结构重组为符合所述目标数据库的表结构的格式,然后配置所述源数据库的表结构和所述目标数据库的表结构的对应关系。
[0021]如此,通过判断所述数据库信息判断所述源数据库和所述目标数据库的类型是否一致可以确保源数据库和目标数据库的类型相同,从而为后续过程的数据迁移提供可能。
[0022]在一些实施例中,所述基于所述表结构对应关系匹配所述源数据库和所述目标数据库以获取语句变动集包括:
[0023]对所述源数据库和所述目标数据库中每个数据表进行结构分析以获取源数据表结构集和目标数据表结构集;
[0024]基于所述表结构对应关系逐一比对所述源数据表结构集和目标数据表结构集中对应表的表结构信息是否一致以获取语句变动集。
[0025]如此,可以通过对数据表结构的结构分析获取源数据库中的每个表和目标数据库中表结构相同的对应表之间的内容差异,从而为后续过程利用此内容差异对访问流量进行准确划分提供了可能。
[0026]在一些实施例中,所述基于所述数据表结构集匹配所述源数据库和所述目标数据库以获取语句变动集包括:
[0027]若所述源数据表结构集和所述目标数据表结构集的表结构信息一致,则所述语句变动集为空集;
[0028]若所述源数据表结构集和所述目标数据表结构集的表结构信息不一致,则生成结构修改脚本,并基于所述结构修改脚本修改所述目标数据表结构集的表结构信息。
[0029]如此,能够根据所述源数据库和所述目标数据库的表结构信息的不同自动生成结构修改脚本以确保所述源数据库和所述目标数据库的表结构一致,相对于人工方式可以有效节约人力资源,同时提高数据迁移的效率。
[0030]在一些实施例中,所述若所述源数据表结构集和所述目标数据表结构集的表结构信息不一致,则生成结构修改脚本,包括:
[0031]分析所述源数据表结构集和所述目标数据表结构集的表结构信息以获取差异信息;
[0032]基于所述差异信息拼接sql语句以生成标准数据操纵语句;
[0033]基于所述标准数据操纵语句生成结构修改脚本。
[0034]如此,通过获取差异信息来拼接sql语句可以使用户根据需要灵活增加、删除或修改数据库中需要变动的内容,实现对数据库的基本操作,同时标准数据操纵语句可以作为对数据库中的对象和数据运行访问工作的编程语句来生成对应的结构修改脚本。
[0035]在一些实施例中,所述基于所述语句变动集和聚类算法划分所述源数据库的访问流量信息以获取同步时间集包括:
[0036]使用流量监控工具以获取所述源数据库的访问流量信息;
[0037]使用K

均值聚类算法划分所述访问流量信息,所述K值由所述语句变动集指定获取;
[0038]将划分后每种类别的访问流量信息所对应的时间段作为同步时间段,所有的同步时间段构成所述同步时间集。
[0039]如此,可以根据源数据库的访问流量将待迁移数据在尽量不影响系统正常运转的时间段内进行分段迁移,从而提高系统正常运转的效率。
[0040]本申请实施例还提供一种基于人工智能的数据迁移装置,包括:
[0041]获取单元,用于获取源数据库和目标数据库的数据库信息;
[0042]配制单元,用于基于所述数据库信息配置所述源数据库和所述目标数据库的表结构以获取表结构对应关系;
[0043]匹配单元,用于基于所述表结构对应关系匹配所述源数据库和所述目标数据库以获取语句变动集;
[0044]划分单元,用于基于所述语句变动本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种基于人工智能的数据迁移方法,其特征在于,包括:获取源数据库和目标数据库的数据库信息;基于所述数据库信息配置所述源数据库和所述目标数据库的表结构以获取表结构对应关系;基于所述表结构对应关系匹配所述源数据库和所述目标数据库以获取语句变动集;基于所述语句变动集和聚类算法划分所述源数据库的访问流量信息以获取同步时间集;基于所述语句变动集和所述同步时间集同步所述源数据库中的数据至所述目标数据库以完成数据迁移。2.如权利要求1所述的基于人工智能的数据迁移方法,其特征在于,所述获取源数据库和目标数据库的数据库信息包括:依据web页面接收用户输入的所述源数据库的数据库信息,所述源数据库的数据库信息包括连接名称、数据库类型、模式、主机IP、数据库名称、端口、用户名以及密码;依据web页面接收用户输入的所述目标数据库的数据库信息,所述目标数据库的数据库信息包括数据库表名、同步方式、连接名称、数据库类型、主机IP、数据库名称、端口、用户名、密码以及目标库表名。3.如权利要求1所述的基于人工智能的数据迁移方法,其特征在于,所述基于所述数据库信息配置所述源数据库和所述目标数据库的表结构以获取表结构对应关系包括:基于所述数据库信息判断所述源数据库和所述目标数据库的类型是否一致以获取判断结果,所述判断结果为一致和不一致;若所述判断结果为一致,则配置所述源数据库的表结构和所述目标数据库的表结构的对应关系;若所述判断结果为不一致,则将所述源数据库的表结构重组为符合所述目标数据库的表结构的格式,然后配置所述源数据库的表结构和所述目标数据库的表结构的对应关系。4.如权利要求1所述的基于人工智能的数据迁移方法,其特征在于,所述基于所述表结构对应关系匹配所述源数据库和所述目标数据库以获取语句变动集包括:对所述源数据库和所述目标数据库中每个数据表进行结构分析以获取源数据表结构集和目标数据表结构集;基于所述表结构对应关系逐一比对所述源数据表结构集和目标数据表结构集中对应表的表结构信息是否一致以获取语句变动集。5.如权利要求4所述的基于人工智能的数据迁移方法,其特征在于,所述基于所述表结构对应关系逐一比对所述源数据表结构集和目标数据表结构集中对应表的表...

【专利技术属性】
技术研发人员:林雄
申请(专利权)人:平安科技深圳有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1