分布式备份数据的方法、装置和系统制造方法及图纸

技术编号:13034130 阅读:86 留言:0更新日期:2016-03-17 10:27
本发明专利技术公开了一种分布式备份数据的方法、装置和系统。其中,该方法包括:主服务器接收调用客户端的操作请求,并基于操作请求生成操作数据;主服务器将操作数据保存至本地的主存储器,并生成同步指令;主服务器根据同步指令将操作数据同步至从服务器的从存储器中,其中,主服务器在将操作数据同步至从服务器之后,默认同步操作成功,无需等待从服务器返回同步成功的反馈信息。本发明专利技术解决了现有技术的分布式系统提供的容灾方案需要保持系统的一致性,导致系统性能差的技术问题。

【技术实现步骤摘要】

本专利技术涉及计算机互联网领域,具体而言,涉及一种分布式备份数据的方法、装置和系统
技术介绍
现有技术提供了一种KV (key-value)存储模式,该KV存储模式非常适合存储不涉及过多数据关系的业务数据。这种KV存储模式拥有高并发的读写性能,高效率存储和访问,高可扩展性和高可用性等特点。现有的应用架构平台提供一种用于存储业务文件的业务服务器,该业务服务器可以使用KV存储技术来存储用户和业务文件的索引数据,从而提供高质量的海量服务。基于上述KV (key-value)存储模式,随着应用架构平台的业务规模不断扩大,业务服务器可以以互联网数据中心IDC的形式来存储客户端用户所要访问的资源,通常情况下,会将所有资源集中存储在单个IDC中。随着用户对业务可用性的要求越来越高。原来将所有存储资源集中在单个IDC的架构有一定缺陷。比如:单个IDC网络出口发生硬件故障,单个IDC发生掉电等极端情况时,或者某个省份运营商的网络出口出现不可用,会导致整个业务中断较长时间。针对上述问题,可以采用备份该单个IDC中的资源的方法来实现一种容灾方案。目前业界常用的容灾方案较为复杂,对原有架构和数据结构冲击较大。由此可知,现有技术可以提供一种基于KV存储的容灾方案,这种容灾方案可以根据分布式系统CAP原则来实现,这种容灾方案的基本原则是为当前的主服务器IDC提供至少三个从服务器IDC,即将KV形式的操作数据利用DHT算法分布到多个设备节点上,每一份操作数据都至少保存在三个节点上。从而使得在主服务器IDC上实现的写操作可以基于时间向量算法在三个副本上进行同步。具体的,上述方案提供的整个容灾系统基于NWR原则(W+R>N),该NWR原则的具体描述如下:N表示主服务器IDC上产生的一个操作数据拥有的副本数量,即该主服务器IDC的从服务器IDC的数量;W表示系统在写入或者更新主服务器IDC上产生的一个操作数据时,需要同步等待写入成功的副本数;R表示系统在读取主服务器IDC上产生的一个操作数据时,需要读取的副本数。例如:在一个分布式系统中,主服务器IDC上产生的每个操作数据有3个副本(N = 3),如果写一个副本(W = 1)成功就算成功的话,那么读操作时要读取该数据三个副本(R = 3),才能通过比较得到最新的数据。该原则为了保持一致性在读或写性能上有所取舍,W或者R取值越大,则性能越低。由此可知,基于上述NWR原则的分布式容灾系统,在客户端请求主服务器的操作数据之后,操作数据需要在至少三个从服务器中备份成功,并主服务器在接收到所有从服务器返回的备份成功消息的情况下,才可以接收客户端的新的业务请求,即只有在操作数据在所有从服务器都同步成功之后,客户端才可以开始下一个业务请求。针对上述现有技术的分布式系统提供的容灾方案需要保持系统的一致性,导致系统性能差的问题,目前尚未提出有效的解决方案。
技术实现思路
本专利技术实施例提供了一种分布式备份数据的方法、装置和系统,以至少解决现有技术的分布式系统提供的容灾方案需要保持系统的一致性,导致系统性能差的技术问题。根据本专利技术实施例的一个方面,提供了一种分布式备份数据的方法,该方法包括:主服务器接收调用客户端的操作请求,并基于操作请求生成操作数据;主服务器将操作数据保存至本地的主存储器,并生成同步指令;主服务器根据同步指令将操作数据同步至从服务器的从存储器中,其中,主服务器在将操作数据同步至从服务器之后,默认同步操作成功,无需等待从服务器返回同步成功的反馈信息。根据本专利技术实施例的另一方面,还提供了一种分布式备份数据的装置,该装置包括:生成模块,用于主服务器接收调用客户端的操作请求,并基于操作请求生成操作数据;处理模块,用于主服务器将操作数据保存至本地的主存储器,并生成同步指令;同步处理模块,用于主服务器根据同步指令将操作数据同步至从服务器的从存储器中,其中,主服务器在将操作数据同步至从服务器之后,默认同步操作成功,无需等待从服务器返回同步成功的反馈信息。根据本专利技术实施例的另一方面,还提供了一种分布式备份数据的系统,该系统包括:调用客户端,发送操作请求;从服务器;主服务器,分别与调用客户端和从服务器建立通信关系,用于接收调用客户端的操作请求,并基于操作请求生成操作数据,在将操作数据保存至本地的主存储器,并生成同步指令之后,根据同步指令将操作数据同步至从服务器的从存储器中;其中,主服务器在将操作数据同步至从服务器之后,默认同步操作成功,无需等待从服务器返回同步成功的反馈信息。在本专利技术实施例中,采用主服务器接收调用客户端的操作请求,并基于操作请求生成操作数据;主服务器将操作数据保存至本地的主存储器,并生成同步指令;主服务器根据同步指令将操作数据同步至从服务器的从存储器中,其中,主服务器在将操作数据同步至从服务器之后,默认同步操作成功,无需等待从服务器返回同步成功的反馈信息的方式,通过为主服务器提供一个从服务器来实现主服务器上发生的操作数据都可以进行备份,实现整个系统的容灾处理。在上述操作数据的同步过程中,由于仅执行一次同步操作,而且无需等待从服务器反馈同步成功的信息即可接收调用客户端的新操作任务,这种方式弱化了现有的容灾方案的一致性要求,进而解决了现有技术的分布式系统提供的容灾方案需要保持系统的一致性,导致系统性能差的技术问题。【附图说明】此处所说明的附图用来提供对本专利技术的进一步理解,构成本申请的一部分,本专利技术的示意性实施例及其说明用于解释本专利技术,并不构成对本专利技术的不当限定。在附图中:图1是根据本专利技术实施例一分布式备份数据的系统的结构示意图;图2是根据本专利技术实施例的分布式备份数据的系统框架的流程示意图;图3是根据本专利技术实施例一的一种可选的分布式备份数据的系统的详细结构示意图;图4是本专利技术实施例二的一种运行分布式备份数据方法的主服务器的硬件结构框图;图5是根据本专利技术实施例二的分布式备份数据的方法流程图;图6是根据本专利技术实施例二的一种分布式备份数据的方法的业务交互流程示意图;图7是根据本专利技术实施例三的分布式备份数据的装置的结构示意图;图8是根据本专利技术实施例三的一种可选的分布式备份数据的装置的结构示意图;图9是根据本专利技术实施例三的一种可选的分布式备份数据的装置的结构示意图。【具体实施方式】为了使本
的人员更好地理解本专利技术方案,下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分的实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本专利技术保护的范围。需要说明的是,本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本专利技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。下本文档来自技高网
...

【技术保护点】
一种分布式备份数据的方法,其特征在于,包括:主服务器接收调用客户端的操作请求,并基于所述操作请求生成操作数据;所述主服务器将所述操作数据保存至本地的主存储器,并生成同步指令;所述主服务器根据所述同步指令将所述操作数据同步至从服务器的从存储器中,其中,所述主服务器在将所述操作数据同步至所述从服务器之后,默认同步操作成功,无需等待所述从服务器返回同步成功的反馈信息。

【技术特征摘要】

【专利技术属性】
技术研发人员:肖啸
申请(专利权)人:腾讯科技深圳有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1