当前位置: 首页 > 专利查询>清华大学专利>正文

一种块级别的磁盘数据保护系统及其方法技术方案

技术编号:8532721 阅读:207 留言:0更新日期:2013-04-04 15:40
一种块级别的磁盘数据保护系统及其方法,属于计算机数据存储和保护领域,该系统基于客户端/服务器架构,被保护磁盘位于客户端,服务器端存放备份数据;服务器端分为镜像区、备份区和快照区,被保护磁盘与镜像区做成实时镜像,用户所有对被保护磁盘的操作都会被同步到镜像区;服务器端监听模块将写入到镜像区的数据组织成备份数据单元,依次写入备份区;当备份区内新增数据备份单元数量大于用户设定的阀值时,服务器端对镜像区数据做快照,并将快照数据写入快照区;若用户提出恢复请求,服务器端根据恢复时间点先从快照区将快照数据写入镜像区,再从备份区找出相应备份数据单元写入镜像区,最后返回到被保护磁盘。

【技术实现步骤摘要】

本专利技术属于计算机网络技术和计算机数据存储
,特别涉及。
技术介绍
当今世界,政府与各种企业的数据正经历着爆炸性的增长。由于互联网、电子邮件、以及社交网络的出现,以及越来越多、占用存储介质越来越多的各种应用软件所致,数据量呈现巨大的增长态势。来自10年EMC与IDC联合发布的数据,预计在2020年,全球的数据量会是09年数据量总和的44倍,其中个人数据(包括音频、视频、图形文件)占相当大的比重;而对于企业来说,大量数据的管理问题也是不容小觑的,IBM在12年5月发布的报告说,企业数据正在以55%的速度逐年增长,如今只需两天就能创造出自文明诞生以来到2003年所产生的数据总量。因此对于任何组织和个人来说,数据丢失都会带来严重的后果。针对可能发生的数据丢失,数据保护技术应运而生,简单来说,就是提前把用户的数据备份到别处,若被保护数据发生损坏或丢失,再将备份数据写回到用户的设备中。目前,市场主流的存储系统都支持持续数据保护技术,该技术可以监听到用户对被保护数据的每次操作,并将变化的数据与发生变化的时间点保存在服务器上,若被保护数据发生丢失或损坏时,可根据服务器上之前保存的数据和对应的时间点快速恢复被保护数据。这类典型的系统如Iinux平台上多版本文件系统EXT3C0W和windows平台上容灾备份系统Hyperstor等。但该类系统存在的问题如下1、实现记录数据操作的监听模块,都是基于修改被保护数据所在操作系统内核实现的,这会提升该操作系统的不稳定性,同时加大监听模块程序开发和测试的难度。2、针对不同的操作系统平台(例如Iinux和windows),由于内核API差别极大,需要开发出不同版本的监听模块;即使是同一种操作系统,由于内核升级导致内核API也会有较大变化,所以,针对特定版本内核设计的监听模块若要移植到另一个版本(例如从Iinux 2. 4系统移植到Iinux 2. 6系统),同样需要对监听模块的代码进行大量修改。3、数据恢复操作非常耗时,主要原因是备份软件在数据重组时需要扫描和读取备份在服务器上的大量的变化数据和他们对应的时间点信息,引起大量磁盘I/o操作。
技术实现思路
本专利技术的目的是为克服已有技术的不足之处,提出,该系统通用并且稳定,系统开发和测试的难度低,该方法减少从备份区读取备份数据单位的数量,且节省恢复的时间。1、本专利技术提出的一种块级别的磁盘数据保护系统,其特征在于该系统基于客户端/服务器架构,被保护磁盘位于客户端,服务器端存放备份数据;该服务器端包括内存及磁盘,该磁盘划分为三个逻辑分区,分别是镜像区、快照区和备份区,其中镜像区与客户端被保护磁盘互为实时镜像,当有数据写入被保护磁盘时,相同的数据也会同步写入服务器端的镜像区;服务器端内存中存有快照信息表、备份区中的扇区起始地址、监听模块以及快照阀值;快照信息表中包含快照标示符、快照时间和快照地址三列,快照标示符是快照的标识,快照时间是做快照时的系统时间,快照地址为做快照时备份区的扇区起始地址;监听模块用于监听并判断对于镜像区的iSCSI命令是进行写操作还是数据恢复操作;客户端包括逻辑卷管理器、iSCSI和被保护磁盘三部分,iSCSI用于将服务器端镜像区挂载到客户端,逻辑卷管理器用于将被保护磁盘与服务器端镜像区做成实时镜像,保证当有数据写入被保护磁盘时,相同的数据同步写入服务器端的镜像区。本专利技术还提出采用如上述系统的块级别的磁盘数据保护方法,其特征在于,该方法包括磁盘数据备份和磁盘数据恢复两部分;该磁盘数据备份包括以下步骤11)对服务器端进行初始化,包括对快照阀值赋值(快照阀值可由用户预先设置),以及对镜像区数据进行一次快照作为快照数据,将快照数据存入快照区,向快照信息表中添加一条记录,该记录的快照时间列为当前系统时间,该记录的快照地址列为当前备份区扇区起始地址,该记录的快照标示符列为一个全局随机数,用来标识该次快照;12)服务器端监听镜像区,并判断对于镜像区的iSCSI命令是进行写操作还是数据恢复操作,若是写操作,则将本次写操作暂停;13)服务器端将本次写操作的写入地址、数据长度(以扇区为单位)、当前系统时间以及数据内容组织成一个备份数据单元;14)服务器端从内存中读取备份区扇区起始地址,并以备份区扇区起始地址为目标地址,将备份数据单元写入到备份区中;15)更新备份区扇区起始地址,新扇区起始地址为原扇区起始地址加上备份数据单元的长度;16)恢复本次写操作,使本次写操作写入镜像区;17)自上一次对镜像区做快照起,若备份区内增加的备份数据单元的个数大于快照阀值,对镜像区数据进行一次快照作为快照数据,将快照数据存入快照区,向快照信息表中添加一条记录,该记录的快照时间列为当前系统时间,该记录的快照地址列为当前备份区扇区起始地址,该记录的快照标示符列为一个全局随机数,用来标识该次快照。该磁盘数据恢复包括以下步骤21)服务器端自动监听镜像区,并判断对于镜像区的iSCSI命令是进行写操作还是数据恢复操作,若是数据恢复操作,则服务器端根据接收客户端提交的恢复时间点,查询快照信息表,找出所有快照时间中最临近的早于恢复时间点的一条快照记录,取出该条记录的快照标示符和快照地址;22)服务器端根据快照标示符从快照区取出快照数据,并将快照数据写入镜像区;23)服务器端以快照地址为起始地址,从备份区中依次向后取出备份数据单元,直到备份数据单元内的系统时间晚于客户端提交的恢复时间点,根据已取出的各个数据单元的扇区起始地址、数据长度、数据内容将备份数据写入镜像区;24)服务器端将镜像区数据返回到客户端被保护磁盘。本专利技术提出的,其优点是1、平台通用磁盘数据保护系统适用于多种操作系统平台,或者同一种操作系统的不同版本。2、系统稳定磁盘数据保护系统的实现不用修改操作系统内核,保证了被保护数据所在操作系统的稳定性,同时也降低系统开发和测试的难度。3、快速恢复数据恢复时,磁盘数据保护系统先从快照区读取相应的快照数据,减少从备份区读取备份数据单位的数量,节省恢复的时间。附图说明图1是本专利技术磁盘数据保护系统组成示意图。图2是本专利技术磁盘数据保护系统快照信息表实施例结构示意图。图3是本专利技术的磁盘数据保护系统数据备份实施例流程框图。图4是本专利技术的磁盘数据保护系统备份数据单元实施例结构示意图。图5是本专利技术的磁盘数据保护系统数据恢复实施例流程框图。具体实施例方式本专利技术提出,结合附图及实施例详细说明如下本专利技术提出一种块级别的磁盘数据保护系统,如图1所示,数据保护首先需要解决的问题是如何在系统中截取到每次写操作。如果在被保护的业务系统上截取,可能会影响业务系统自身的读写性能,本专利技术使用远程镜像技术来保障写操作的截取不会影像到业务系统自身的运作。本系统基于客户端/服务器架构,被保护磁盘位于客户端,服务器端存放备份数据。服务器端磁盘划分为三个逻辑分区,分别是镜像区、快照区和备份区,其中镜像区与客户端被保护磁盘互为实时镜像,当有数据写入被保护磁盘时,相同的数据也会同步写入服务器端的镜像区;服务器端内存中存有快照信息表、备份区中的扇区起始地址、监听模块以及快照阀值;快照信息表中包含快照标示符、快照时间和快照地址三列,快照标示符是快照的标识,快照时间是做快照时的系统时间,快照地址等于做快照时本文档来自技高网
...

【技术保护点】
一种块级别的磁盘数据保护系统,其特征在于:该系统基于客户端/服务器架构,被保护磁盘位于客户端,服务器端存放备份数据;该服务器端包括内存及磁盘,该磁盘划分为三个逻辑分区,分别是镜像区、快照区和备份区,其中镜像区与客户端被保护磁盘互为实时镜像,当有数据写入被保护磁盘时,相同的数据也会同步写入服务器端的镜像区;服务器端内存中存有快照信息表、备份区中的扇区起始地址、监听模块以及快照阀值;快照信息表中包含快照标示符、快照时间和快照地址三列,快照标示符是快照的标识,快照时间是做快照时的系统时间,快照地址为做快照时备份区的扇区起始地址;监听模块用于监听并判断对于镜像区的iSCSI命令是进行写操作还是数据恢复操作;客户端包括逻辑卷管理器、iSCSI和被保护磁盘三部分,iSCSI用于将服务器端镜像区挂载到客户端,逻辑卷管理器用于将被保护磁盘与服务器端镜像区做成实时镜像,保证当有数据写入被保护磁盘时,相同的数据同步写入服务器端的镜像区。

【技术特征摘要】
1.一种块级别的磁盘数据保护系统,其特征在于该系统基于客户端/服务器架构,被保护磁盘位于客户端,服务器端存放备份数据; 该服务器端包括内存及磁盘,该磁盘划分为三个逻辑分区,分别是镜像区、快照区和备份区,其中镜像区与客户端被保护磁盘互为实时镜像,当有数据写入被保护磁盘时,相同的数据也会同步写入服务器端的镜像区;服务器端内存中存有快照信息表、备份区中的扇区起始地址、监听模块以及快照阀值;快照信息表中包含快照标示符、快照时间和快照地址三列,快照标示符是快照的标识,快照时间是做快照时的系统时间,快照地址为做快照时备份区的扇区起始地址;监听模块用于监听并判断对于镜像区的iSCSI命令是进行写操作还是数据恢复操作; 客户端包括逻辑卷管理器、iSCSI和被保护磁盘三部分,iSCSI用于将服务器端镜像区挂载到客户端,逻辑卷管理器用于将被保护磁盘与服务器端镜像区做成实时镜像,保证当有数据写入被保护磁盘时,相同的数据同步写入服务器端的镜像区。2.一种采用如权利要求1所述系统的块级别的磁盘数据保护方法,其特征在于,该方法包括磁盘数据备份和磁盘数据恢复两部分;该磁盘数据备份包括以下步骤 11)对服务器端进行初始化,包括对快照阀值赋值,以及对镜像区数据进行一次快照作为快照数据,将快照数据存入快照区,向快照信息表中添加一条记录,该记录的快照时间列为当前系统时间,该记录的快照地址列为当前备份区扇区起始地址,该记录的快照标示符列为一个全局随机数,用来标识该次快照; 12)服务器端监听镜像区,并判断对于镜像区的iSCSI命令是进行写操作还是数...

【专利技术属性】
技术研发人员:汪东升王占业
申请(专利权)人:清华大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1