System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种数据同步的优化方法及终端技术_技高网

一种数据同步的优化方法及终端技术

技术编号:41127835 阅读:4 留言:0更新日期:2024-04-30 17:56
本发明专利技术提供的一种数据同步的优化方法及终端,包括:实时监测数据库集群中主节点与各个从节点之间同步数据的延迟情况;若存在从节点与主节点的同步延迟时间大于预设值,则断开从节点与主节点的连接,并以文件复制的形式将主节点的数据赋值到断开的从节点中;复制完成后,重新建立从节点与主节点的连接。本发明专利技术通过在主从节点之间的数据同步延迟时间超过预设值的范围时断开主从节点的连接并以文件复制的形式进行主从数据恢复,当复制文件完毕后再重新建立主从连接关系,能够在主从同步延迟较大场景下,快速的自动实现主从数据一致,减少系统出故障的时间,提高系统的稳定性。

【技术实现步骤摘要】

本专利技术涉及数据处理,特别涉及一种数据同步的优化方法及终端


技术介绍

1、目前大部分的业务系统都存在使用数据库来进行数据的存储,而为了满足逐渐剧增的用户数量,用户的数据存储也会与日俱增。

2、通常系统为了解决海量数据存储问题,都会采用分布式架构的方式,即一主多从的部署方式。数据由主节点进行写入,通过主从同步的方式,同步数据到各个从节点中,进而实现主从数据一致。

3、采用这种方式下,就会存在主从数据不一致的情况,即主从同步延迟的场景。通常主从同步延迟不会很大,或者短时间内,就能够达到主从同步一致的场景。可是,当某些大表存在字段变更或者添加索引等耗时较大的操作时,由于主从同步是同步执行主节点的操作,当从节点也同步执行这些耗时较大操作时,将会导致主从同步延迟加大,此时,主节点后续进行的更新操作,将不能及时的同步至从节点中,进而导致程序从从节点获取数据失败,最终导致系统错误。

4、目前并没有较好的方式解决这种主从同步延迟较大的方式,通常都是只能等待程序自动恢复,自动实现主从数据一致。


技术实现思路

1、本专利技术所要解决的技术问题是:提供一种数据同步的优化方法及终端,能够在主从同步延迟较大场景下快速的自动实现主从数据一致,有效提高系统的稳定性。

2、为了解决上述技术问题,本专利技术采用的技术方案为:

3、一种数据同步的优化方法,包括步骤:

4、s1、实时监测数据库集群中主节点与各个从节点之间同步数据的延迟情况;p>

5、s2、若存在所述从节点与所述主节点的同步延迟时间大于预设值,则断开所述从节点与所述主节点的连接,并以文件复制的形式将所述主节点的数据赋值到断开的所述从节点中;

6、s3、复制完成后,重新建立所述从节点与所述主节点的连接。

7、为了解决上述技术问题,本专利技术采用的另一技术方案为:

8、一种数据同步的优化终端,包括存储器、处理器以及存储在所述存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现以下步骤:

9、s1、实时监测数据库集群中主节点与各个从节点之间同步数据的延迟情况;

10、s2、若存在所述从节点与所述主节点的同步延迟时间大于预设值,则断开所述从节点与所述主节点的连接,并以文件复制的形式将所述主节点的数据赋值到断开的所述从节点中;

11、s3、复制完成后,重新建立所述从节点与所述主节点的连接。

12、本专利技术的有益效果在于:提供一种数据同步的优化方法及终端,通过实时监控数据库集群中主从节点进行数据同步时的延迟情况,当存在主从节点之间的数据同步延迟时间超过预设值的范围时,则认为短时间内无法很快达到主从数据一致,因此通过断开主从节点的连接并以文件复制的形式进行主从数据恢复,当复制文件完毕后,再次建立主从连接关系,能够在主从同步延迟较大场景下,快速的自动实现主从数据一致,减少系统出故障的时间,提高系统的稳定性。

本文档来自技高网...

【技术保护点】

1.一种数据同步的优化方法,其特征在于,包括步骤:

2.根据权利要求1所述的一种数据同步的优化方法,其特征在于,所述步骤S1之前还包括步骤:

3.根据权利要求2所述的一种数据同步的优化方法,其特征在于,所述步骤S2具体为:

4.根据权利要求3所述的一种数据同步的优化方法,其特征在于,所述步骤S3之后还包括:

5.根据权利要求4所述的一种数据同步的优化方法,其特征在于,所述步骤S4还包括:

6.一种数据同步的优化终端,其特征在于,包括存储器、处理器以及存储在所述存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现以下步骤:

7.根据权利要求6所述的一种数据同步的优化终端,其特征在于,所述步骤S1之前还包括步骤:

8.根据权利要求7所述的一种数据同步的优化终端,其特征在于,所述步骤S2具体为:

9.根据权利要求8所述的一种数据同步的优化终端,其特征在于,所述步骤S3之后还包括:

10.根据权利要求9所述的一种数据同步的优化终端,其特征在于,所述步骤S4还包括:

...

【技术特征摘要】

1.一种数据同步的优化方法,其特征在于,包括步骤:

2.根据权利要求1所述的一种数据同步的优化方法,其特征在于,所述步骤s1之前还包括步骤:

3.根据权利要求2所述的一种数据同步的优化方法,其特征在于,所述步骤s2具体为:

4.根据权利要求3所述的一种数据同步的优化方法,其特征在于,所述步骤s3之后还包括:

5.根据权利要求4所述的一种数据同步的优化方法,其特征在于,所述步骤s4还包括:

6.一种数据同步的优化终端,其特征在于,包括存储...

【专利技术属性】
技术研发人员:刘德建张少敏郭孟祺郑坦郑锦斌陈宏
申请(专利权)人:福建天泉教育科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1