基于MySQL主从复制集群的故障处理方法、系统、设备和介质技术方案

技术编号:24330804 阅读:27 留言:0更新日期:2020-05-29 19:32
本发明专利技术提供了一种基于MySQL主从复制集群的故障处理方法、系统、设备和介质。所述故障处理方法包括:基于从数据库获取第一状态数据;根据所述第一状态数据判断是否存在异常信息;若判断存在异常信息,根据所述异常信息查询知识库,获取对应的问题处置建议;若判断不存在异常信息,基于所述从数据库获取第二状态数据;根据所述第二状态数据查询所述知识库,获取对应的处置建议。实施本发明专利技术,能够快速、自动定位出问题并给出处置方法建议。

【技术实现步骤摘要】
基于MySQL主从复制集群的故障处理方法、系统、设备和介质
本专利技术涉及计算机应用
,更为具体而言,涉及一种基于MySQL(一种关系型数据库)主从复制集群的故障处理方法、系统、设备和介质。
技术介绍
目前,MySQL数据库的高可用主要是通过主从复制集群实现的,其实现方法为:当主数据库故障时,应用系统能连接到从数据库,保证业务能继续访问,从而实现业务的高可用。但是MySQL的主从复制集群中主数据库和从数据库的数据不是共享的,因此,为了保证应用系统在主数据库进行数据增加、删除和修改后,从数据库和主数据库一致,可以采用基于binlog(二进制日志)的主从复制技术。MySQL主从复制的核心原理为:主数据库与从数据库建立连接后,主数据库将数据增加、删除和修改的操作记录在binlog,然后将binlog传输到从数据库,从数据库接收到binlog后再重新执行一遍,这样就保证一个操作在主数据库和从数据库均执行,进而保证了两边数据的一致性。由于网络的复杂性、传输的不确定性和数据库操作的多样性,主从复制会出现很多问题,而对于这些多样的、复杂的场景,现有的方法是:DBA(DataBaseAdministrator,数据库管理员)人工登录数据库服务器,查询一系列信息,包括查看主从数据库的状态、I/O线程状态、SQL线程状态、I/O线程报错信息、SQL线程报错信息、主数据库binlog日志解析、从数据库binlog日志解析、当前事务状态、当前锁信息、当前活动的sql等,并结合具体场景进行综合分析,定位到问题后,再与业务方进行沟通,给出具体的应急处置方法。然而,由于当前MySQL主从复制故障场景较多且复杂,往往需要DBA查询各方面信息进行综合诊断,这个过程会消耗大量时间,且受DBA技术能力影响较大,有些重要系统,如果未能在适当时间内处理完毕,会直接影响客户体验,严重的甚至直接对企业造成重大影响。
技术实现思路
为解决上述现有技术存在的问题,本专利技术提供了一种基于MySQL主从复制集群的故障处理方法、系统、存储介质和计算机设备,通过自动分析主从复制故障并给出处置建议,避免了人工处置分析慢、分析不全面、人工操作效率低等问题,大大提高了主从复制故障的定位和处理效率。根据本专利技术实施方式的第一面,提供了一种基于MySQL主从复制集群的故障处理方法,包括:服务器和防火墙通过长连接保持通信;其中,所述封禁IP的方法包括:基于从数据库获取第一状态数据;根据所述第一状态数据判断是否存在异常信息;若判断存在异常信息,根据所述异常信息查询知识库,获取对应的问题处置建议;若判断不存在异常信息,基于所述从数据库获取第二状态数据;根据所述第二状态数据查询所述知识库,获取对应的处置建议。根据上述实施方式,可以自动对状态数据进行全面的识别和判断,并根据异常信息、状态数据查询知识库,得到知识库中的处置建议,从而避免了人工处置分析慢、分析不全面、人工操作效率低等问题,能够提高主从复制的故障定位和处理效率。在本专利技术的一些实施方式中,所述第一状态数据包括:IO线程状态、SQL线程状态、IO错误信息、SQL错误信息、接收日志POS数据、执行日志POS数据、seconds_behind_master。在本专利技术的一些实施方式中,所述异常信息包括:IO报错信息、SQL报错信息、POS数无变化。在本专利技术的一些实施方式中,所述第二状态数据包括:POS点前后的SQL的操作类型、DML/DDL的操作记录的数量、操作系统的状态、操作对象的类型。在本专利技术的一些实施方式中,所述知识库包括:大事务处理知识库、对象处理知识库、SQL处理知识库、应用处理知识库、硬件处理知识库、常见问题处理知识库。通过自动识别和判断多项状态数据、异常信息,查询对应的各类知识库,能够得到更加准确的判断结果和故障处置建议,避免了人工分析不全面、效率低等问题,能够提高主从复制的故障定位和处理效率。在本专利技术的一些实施方式中,基于从数据库获取第一状态数据包括:从所述第一状态数据中获取第一状态成分的内容和名称;对所述第一状态成分添加标识;存储所述添加标识后的第一状态成分。在本专利技术的一些实施方式中,基于所述从数据库获取第二状态数据包括:从所述第二状态数据中获取第二状态成分的内容和名称;对所述第二状态成分添加标识;存储所述添加标识后的第二状态成分。通过对状态数据添加标识,可以区分多次执行结果,从而方便故障诊断。根据本专利技术实施方式的第二方面,提供了一种基于MySQL主从复制集群的故障处理系统,包括:第一数据获取模块,用于基于从数据库获取第一状态数据;第一判断模块,用于根据所述第一状态数据判断是否存在异常信息;第一建议获取模块,用于在所述第一判断模块判断存在异常信息时,根据所述异常信息查询知识库,获取对应的问题处置建议;第二数据获取模块,用于在所述第一判断模块判断不存在异常信息,基于所述从数据库获取第二状态数据;第二建议获取模块,用于根据所述第二状态数据查询所述知识库,获取对应的处置建议。根据上述实施方式,可以自动对状态数据进行全面的识别和判断,并根据异常信息、状态数据查询知识库,得到知识库中的处置建议,从而避免了人工处置分析慢、分析不全面、人工操作效率低等问题,能够提高主从复制的故障定位和处理效率。在本专利技术的一些实施方式中,所述第一状态数据包括:IO线程状态、SQL线程状态、IO错误信息、SQL错误信息、接收日志POS数据、执行日志POS数据、seconds_behind_master。在本专利技术的一些实施方式中,所述异常信息包括:IO报错信息、SQL报错信息、POS数无变化。在本专利技术的一些实施方式中,所述第二状态数据包括:POS点前后的SQL的操作类型、DML/DDL的操作记录的数量、操作对象的类型。在本专利技术的一些实施方式中,所述知识库包括:大事务处理知识库、对象处理知识库、SQL处理知识库、应用处理知识库、硬件处理知识库、常见问题处理知识库。通过自动识别和判断多项状态数据、异常信息,查询对应的各类知识库,能够得到更加准确的判断结果和故障处置建议,避免了人工分析不全面、效率低等问题,能够提高主从复制的故障定位和处理效率。在本专利技术的一些实施方式中,基于从数据库获取第一状态数据包括:从所述第一状态数据中获取第一状态成分的内容和名称;对所述第一状态成分添加标识;存储所述添加标识后的第一状态成分。在本专利技术的一些实施方式中,基于所述从数据库获取第二状态数据包括:从所述第二状态数据中获取第二状态成分的内容和名称;对所述第二状态成分添加标识;存储所述添加标识后的第二状态成分。通过对状态数据添加标识,可以区分多次执行结果,从而方便故障诊断。根据本专利技术实施例的第三方面,提供一种计算机可读存储介质,其上存储有计算机可读指令,所述计算机可读指令被处理器执行时可以实现如下操作:所述操作包括如上任意一种实施方式所述故障处理方法所包含的步骤。根据本专利技术实施例的第四方面,提供一种包括存储器本文档来自技高网
...

【技术保护点】
1.一种基于关系型数据库MySQL主从复制集群的故障处理方法,其特征在于,所述故障处理方法包括:/n基于从数据库获取第一状态数据;/n根据所述第一状态数据判断是否存在异常信息;/n若判断存在异常信息,根据所述异常信息查询知识库,获取对应的问题处置建议;/n若判断不存在异常信息,基于所述从数据库获取第二状态数据;/n根据所述第二状态数据查询所述知识库,获取对应的处置建议。/n

【技术特征摘要】
1.一种基于关系型数据库MySQL主从复制集群的故障处理方法,其特征在于,所述故障处理方法包括:
基于从数据库获取第一状态数据;
根据所述第一状态数据判断是否存在异常信息;
若判断存在异常信息,根据所述异常信息查询知识库,获取对应的问题处置建议;
若判断不存在异常信息,基于所述从数据库获取第二状态数据;
根据所述第二状态数据查询所述知识库,获取对应的处置建议。


2.如权利要求1所述的故障处理方法,其特征在于,所述第一状态数据包括:IO线程状态、SQL线程状态、IO错误信息、SQL错误信息、接收日志POS数据、执行日志POS数据、seconds_behind_master。


3.如权利要求1所述的故障处理方法,其特征在于,所述异常信息包括:IO报错信息、SQL报错信息、POS数无变化。


4.如权利要求1所述的故障处理方法,其特征在于,所述第二状态数据包括:POS点前后的SQL的操作类型、DML/DDL的操作记录的数量、操作系统的状态、操作对象的类型。


5.如权利要求1所述的故障处理方法,其特征在于,所述知识库包括:大事务处理知识库、对象处理知识库、SQL处理知识库、应用处理知识库、硬件处理知识库、常见问题处理知识库。


6.如权利要求1所述的故障处理方法,其特征在于,基于从数据库获取第一状态数据包括:
从所述第一状态数据中获取第一状态成分的内容和名称;
对所述第一状态成分添加标识;
存储所述添加标识后的第一状态成分。


7.如权利要求1所述的故障处理方法,其特征在于,基于所述从数据库获取第二状态数据包括:
从所述第二状态数据中获取第二状态成分的内容和名称;
对所述第二状态成分添加标识;
存储所述添加标识后的第二状态成分。


8.一种基于MySQL主从复制集群的故障处理系统,其特征在于,所述故障处理系统包括:
第一数据获取模块,用于基于从数据库获取第一状态数据;
第一判断模块,用于根据所述第一状态数据判断是否存在异常信息;
第一建议获取模块,用于在所述...

【专利技术属性】
技术研发人员:王良元卢星辰
申请(专利权)人:中国建设银行股份有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1