一种云平台mysql数据库实例在线迁移方法技术

本发明专利技术提供了一种云平台mysql数据库实例在线迁移方法，包括以下步骤：S1、通过debezium抽取mysql源数据的数据，并将收取到的源数据库信息存放到消息队列kafka中；S2、利用kafka的sink

【技术实现步骤摘要】
一种云平台mysql数据库实例在线迁移方法


[0001]本专利技术属于基础能力
‑
通用前端
，尤其是涉及一种云平台mysql数据库实例在线迁移方法。

技术介绍

[0002]随着云计算的快速发展，越来越多的企业将其业务迁移到云上，并且经常需要将现有的数据库迁移到云平台上。
[0003]Mysql数据库是当前使用最为广泛的关系型数据库，大多数企业的业务都会选用mysql数据库存储数据，如果企业业务上云时没有一个稳定、便利、灵活的mysql数据库的迁移工具，上云过程将会非常繁琐。

技术实现思路

[0004]有鉴于此，本专利技术旨在提出一种云平台mysql数据库实例在线迁移方法，以至少解决
技术介绍
中的技术问题。
[0005]为达到上述目的，本专利技术的技术方案是这样实现的：
[0006]一种云平台mysql数据库实例在线迁移方法，包括以下步骤：
[0007]S1、通过debezium抽取mysql源数据的数据，并将收取到的源数据库信息存放到消息队列kafka中；
[0008]S2、利用kafka的sink
‑
connector消费消息队列kafka的数据并写入到myslq的目标数据库中。
[0009]进一步的，在步骤S1中，具体包括以下步骤：
[0010]A1、安装Debezium，在服务器上安装Debezium Connect；
[0011]A2、配置Debezium Connect，通过修改connect
‑
distributed.properties来配置Debezium Connect；
[0012]A3、配置MySQL数据库源，在Debezium Connect中启用MySQL Connector，编辑文件"debezium
‑
connector
‑
mysql.properties"文件，将其添加到配置中；
[0013]A4、创建Kafka主题，需要使用Kafka命令创建主题；
[0014]A5、启动Debezium Connect将Debezium Connect与MySQL Connector连接；
[0015]A6、观察Kafka主题中的消息。
[0016]进一步的，在步骤A2中，需要配置以下参数：
[0017]bootstrap.servers：Kafka集群的地址；
[0018]group.id：消费者组的ID；
[0019]offset.storage.topic：存储偏移量数据的主题名称；
[0020]key.converter：指定使用哪个转换器将消息键从字节数组转换为对象；value.converter：指定使用哪个转换器将消息值从字节数组转换为对象。
[0021]进一步的，在步骤A3中，需要为以下选项提供值：
[0022]database.hostname:要抽取数据的MySQL实例的IP地址或主机名；
[0023]database.port:使用的MySQL实例的端口；
[0024]database.user:用户名，具有适当的权限才能访问要抽取的表；
[0025]database.password:密码，与上述用户相关联；
[0026]database.server.id:是整数类型的唯一值，配置多个Connector时，此值在各个实例之间不同；
[0027]database.server.name:唯一标识正在连接的MySQL实例。
[0028]进一步的，在步骤S2中，具体包括以下步骤：
[0029]B1、安装并配置Kafka Connect；
[0030]B2、配置Sink Connector；
[0031]B3、创建MySQL Target表；
[0032]B4、发布消息到Kafka topic；
[0033]B5、检查MySQL target数据库中的数据。
[0034]进一步的，在步骤B1中，安装并配置Kafka Connect的方法为：通过在Connect worker的config/connect
‑
distributed.properties配置文件中，添加mysql
‑
connector.jar依赖和存储偏移量数据的主题参数实现。
[0035]进一步的，在步骤B2中，使用MySQL Connector将Kafka消息写入MySQL数据库，需要创建一个新的Connector，并将其与sink连接器一起使用，在创建Sink Connector时，应该指定以下参数：
[0036]connection.url：目标MySQL实例的连接URL；
[0037]connection.user：连接到目标MySQL实例所需的用户名；
[0038]connection.password：连接到目标MySQL实例所需的密码；
[0039]auto.create：启用或禁用Target Table自动创建功能；
[0040]name：唯一标识连接器的名称，在必要时需要进行更改。
[0041]进一步的，本方案公开了一种电子设备，包括处理器以及与处理器通信连接，且用于存储所述处理器可执行指令的存储器，所述处理器用于执行一种云平台mysql数据库实例在线迁移方法。
[0042]进一步的，本方案公开了一种服务器，包括至少一个处理器，以及与所述处理器通信连接的存储器，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述处理器执行，以使所述至少一个处理器执行一种云平台mysql数据库实例在线迁移方法。
[0043]进一步的，本方案公开了一种计算机可读取存储介质，存储有计算机程序，所述计算机程序被处理器执行时实现一种云平台mysql数据库实例在线迁移方法。
[0044]相对于现有技术，本专利技术所述的一种云平台mysql数据库实例在线迁移方法具有以下有益效果：
[0045]本专利技术所述的一种云平台mysql数据库实例在线迁移方法，可以在线可视化的配置mysql数据库迁移任务，使用灵活方便技术门槛低，支持多任务同时迁移，能同时迁移多个数据库。
附图说明
[0046]构成本专利技术的一部分的附图用来提供对本专利技术的进一步理解，本专利技术的示意性实施例及其说明用于解释本专利技术，并不构成对本专利技术的不当限定。在附图中：
[0047]图1为本专利技术实施例所述的一种云平台mysql数据库实例在线迁移方法示意图。
具体实施方式
[0048]需要说明的是，在不冲突的情况下，本专利技术中的实施例及实施例中的特征可以相互组合。
[0049]下面将参考附图并结合实施例来详细说明本专利技术。
[0050]云平台上提供mysql数据库的迁移工具，用户进行mysql数本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种云平台mysql数据库实例在线迁移方法，其特征在于，包括以下步骤：S1、通过debezium抽取mysql源数据的数据，并将收取到的源数据库信息存放到消息队列kafka中；S2、利用kafka的sink
‑
connector消费消息队列kafka的数据并写入到myslq的目标数据库中。2.根据权利要求1所述的一种云平台mysql数据库实例在线迁移方法，其特征在于，在步骤S1中，具体包括以下步骤：A1、安装Debezium，在服务器上安装Debezium Connect；A2、配置Debezium Connect，通过修改connect
‑
distributed.properties来配置Debezium Connect；A3、配置MySQL数据库源，在Debezium Connect中启用MySQL Connector，编辑文件"debezium
‑
connector
‑
mysql.properties"文件，将其添加到配置中；A4、创建Kafka主题，需要使用Kafka命令创建主题；A5、启动Debezium Connect将Debezium Connect与MySQL Connector连接；A6、观察Kafka主题中的消息。3.根据权利要求2所述的一种云平台mysql数据库实例在线迁移方法，其特征在于，在步骤A2中，需要配置以下参数：bootstrap.servers：Kafka集群的地址；group.id：消费者组的ID；offset.storage.topic：存储偏移量数据的主题名称；key.converter：指定使用哪个转换器将消息键从字节数组转换为对象；value.converter：指定使用哪个转换器将消息值从字节数组转换为对象。4.根据权利要求1所述的一种云平台mysql数据库实例在线迁移方法，其特征在于，在步骤A3中，需要为以下选项提供值：database.hostname:要抽取数据的MySQL实例的IP地址或主机名；database.port:使用的MySQL实例的端口；database.user:用户名，具有适当的权限才能访问要抽取的表；database.password:密码，与上述用户相关联；database.server.id:是整数类型的唯一值，配置多个Connector时，此值在各个实例之间不同；database.server...

【专利技术属性】
技术研发人员：王爽，
申请(专利权)人：紫光云技术有限公司，
类型：发明
国别省市：