【技术实现步骤摘要】
本申请涉及数据处理，尤其涉及一种mysql数据库集群的链路检测方法及系统。
技术介绍
1、mysql数据库集群是一种无共享的、分布式节点架构的存储方案，其目的是提供容错性和高性能。数据更新使用读已提交隔离级别来保证所有节点数据的一致性，使用两阶段提交机制保证所有节点都有相同的数据。无共享的对等节点使得某台服务器上的更新操作在其他服务器上立即可见。传播更新使用一种复杂的通信机制，这一机制专用来提供跨网络的高吞吐量。通过多个mysql服务器分配负载，从而最大程序地达到高性能，通过在不同位置存储数据保证高可用性和冗余。
2、mysql提供了多种集群方案，其中主从复制是最简单的方式之一。主从复制是通过重放binlog实现主库数据的异步复制。即当主库执行了一条sql命令，那么在从库同样的执行一遍，从而达到主从复制的效果。在这个过程中，master对数据的写操作记入二进制日志文件中(binlog)，生成一个 log dump 线程，用来给从库的i/o线程传binlog。而从库的i/o线程去请求主库的binlog，并将得到的binlog日志写到中继日志（relaylog）中，从库的sql线程，会读取relaylog文件中的日志，并解析成具体操作，通过主从的操作一致，而达到最终数据一致。
3、目前，mysql数据库集群的链路存在以下不足：
4、第一，虽然mysql提供了主从复制机制，确保了数据在主节点和从节点之间的同步。但是，如果主节点出现故障，整个集群将受到影响。
5、第二，mysql数据库集群
6、第三，在分布式环境下，由于网络延迟等原因，主从节点之间可能出现数据不一致的情况。
7、第三，在分布式环境中，如何保证数据的安全性和隐私性是一个挑战。例如，在跨域访问的情况下，如何防止敏感信息泄露；在多租户架构下，如何确保不同业务间的数据隔离等。
8、第四，随着集群规模的不断扩大，管理和维护mysql数据库集群的难度也在增加。例如，监控集群健康状况、解决故障、优化性能等方面都需要投入更多的时间和精力。
9、因此，目前亟需解决的技术问题是：如何对mysql数据库集群的链路进行检测，在分布式环境下，确保主从复制机制下主从节点的数据同步，提高主从节点通信效率、数据安全性和运行可靠性。
技术实现思路
1、本申请的目的在于提供一种mysql数据库集群的链路检测方法及系统，在分布式环境下，确保主从复制机制下主从节点的数据同步，提高主从节点通信效率、数据安全性和运行可靠性。
2、为达到上述目的，本申请提供一种mysql数据库集群的链路检测方法，该方法包括如下步骤：响应于mysql数据库集群的链路调整请求，在链路上增加或删除节点；采集mysql数据库集群的链路上各节点状态指标数据和对应分布式环境网络连接指标数据；根据mysql数据库集群的链路上各节点状态指标数据和对应分布式环境网络连接指标数据，计算该链路的主从节点数据同步可靠值；比较链路的主从节点数据同步可靠值与预设可靠阈值的大小，若链路的主从节点数据同步可靠值小于预设可靠阈值，则暂停该链路的数据同步进程，否则，允许执行该链路的主从节点数据同步进程；对链路上主从节点的同步数据进行一致性检测，若检测到不一致的数据，则重新对主从节点进行数据同步，否则，无需重新对主从节点进行数据同步。
3、如上所述的mysql数据库集群的链路检测方法，其中，该方法还包括如下步骤：
4、响应于请求端发送的同步数据获取请求，采集链路上节点的压力特征数据、服务特征数据和服务安全配置数据，以及请求端的请求配置数据；
5、根据链路上节点的压力特征数据、服务特征数据和服务安全配置数据，以及请求端的请求配置数据，计算链路上节点的响应优越值；
6、选择响应优越值最大的节点，通过选择的节点向请求端发送其请求获取的同步数据。
7、如上所述的mysql数据库集群的链路检测方法，其中，在每一个链路上设置一个管理服务节点，
8、管理服务节点，用于对链路上的节点进行管理，记录该链路上包含的节点信息、数据同步的发生时间、数据同步的延迟时间，以及该链路上发生故障事件的时间。
9、如上所述的mysql数据库集群的链路检测方法，其中，主从节点数据同步可靠值的计算公式为：
10、；
11、其中，表示主从节点数据同步可靠值；表示主从节点网络连通因子；若主从节点的网络连通，则；否则；表示主从节点所对应的分布式环境网络连接指标数据的影响权重；表示分布式环境网络连接指标数据的总种类数；表示第种分布式环境网络连接指标数据的权重因子；表示第种分布式环境网络连接指标数据的值；表示主节点指标数据的影响权重；表示主节点指标数据的总种类数；表示第种主节点指标数据的权重因子；表示第种主节点指标数据的值；表示从节点指标数据的影响权重；表示从节点指标数据的总种类数；表示第种从节点指标数据的权重因子；表示第种从节点指标数据的值。
12、如上所述的mysql数据库集群的链路检测方法，其中，在链路上增加或删除节点包括：在链路上增加主节点、增加从节点、删除主节点和/或删除从节点。
13、如上所述的mysql数据库集群的链路检测方法，其中，该方法还包括：
14、在采样周期内，获取链路上从节点的同步数据一致性检测异常数据；
15、根据链路上从节点的同步数据一致性检测异常数据，计算各个从节点的数据同步异常风险值；
16、比较从节点的数据同步异常风险值与预设风险阈值的大小，若从节点的数据同步异常风险值大于预设风险阈值，则将该从节点进行检修或替换，否则，无需将该从节点进行检修或替换。
17、如上所述的mysql数据库集群的链路检测方法，其中，链路上包含主节点和从节点，主节点和从节点之间存在从主节点到从节点的数据同步过程。
18、作为本申请的第二方面，本申请提供一种mysql数据库集群的链路检测系统，执行一种mysql数据库集群的链路检测方法，该系统包括：
19、节点调整模块，用于响应于mysql数据库集群的链路调整请求，在链路上增加或删除节点；
20、采集模块，用于采集mysql数据库集群的链路上各节点状态指标数据和对应分布式环境网络连接指标数据；
21、数据处理器，用于根据mysql数据库集群的链路上各节点状态指标数据和对应分布式环境网络连接指标数据，计算该链路的主从节点数据同步可靠值；
22、数据比较器，用于比较链路的主从节点数据同步可靠值与预设可靠阈值的大小，若链路的主从节点数据同步可靠值小于预设可靠阈值，则暂停该链路的数据同步进程，否则，允许执行该链路的主从节点数本文档来自技高网...
【技术保护点】
1.一种MySQL数据库集群的链路检测方法，其特征在于，该方法包括如下步骤：
2.根据权利要求1所述的MySQL数据库集群的链路检测方法，其特征在于，该方法还包括如下步骤：
3.根据权利要求1所述的MySQL数据库集群的链路检测方法，其特征在于，在每一个链路上设置一个管理服务节点，
4.根据权利要求1所述的MySQL数据库集群的链路检测方法，其特征在于，主从节点数据同步可靠值的计算公式为：
5.根据权利要求1所述的MySQL数据库集群的链路检测方法，其特征在于，在链路上增加或删除节点包括：在链路上增加主节点、增加从节点、删除主节点和/或删除从节点。
6.根据权利要求1所述的MySQL数据库集群的链路检测方法，其特征在于，该方法还包括：
7.根据权利要求5所述的MySQL数据库集群的链路检测方法，其特征在于，链路上包含主节点和从节点，主节点和从节点之间存在从主节点到从节点的数据同步过程。
8.一种MySQL数据库集群的链路检测系统，其特征在于，执行权利要求1-7之一所述的方法，该系统包括：
<...【技术特征摘要】
1.一种mysql数据库集群的链路检测方法，其特征在于，该方法包括如下步骤：
2.根据权利要求1所述的mysql数据库集群的链路检测方法，其特征在于，该方法还包括如下步骤：
3.根据权利要求1所述的mysql数据库集群的链路检测方法，其特征在于，在每一个链路上设置一个管理服务节点，
4.根据权利要求1所述的mysql数据库集群的链路检测方法，其特征在于，主从节点数据同步可靠值的计算公式为：
5.根据权利要求1所述的mysql数据库集群的链路检测方法，其特征在于，在链路上增加或删除节点包括：在链路上增加主节点、增加从节点、删除主...
【专利技术属性】
技术研发人员：张文凤，娄帅，
申请(专利权)人：北京万里开源软件有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。