基于重复数据删除的远程复制方法及装置制造方法及图纸

技术编号:11234569 阅读:50 留言:0更新日期:2015-04-01 08:27
本发明专利技术实施例提供一种基于重复数据删除的远程复制方法及装置。本发明专利技术基于重复数据删除的远程复制方法,应用于远程复制系统中,所述系统包括:主端设备和容灾端设备,所述主端设备和所述容灾端设备均存储第一快照,所述方法包括:主端设备获取所述主端设备的第二快照;所述主端设备判断所述第二快照中相对第一快照增加的数据块的指纹是否与所述第一快照中的数据块的指纹相同;当所述增加的数据块中的第一数据块的指纹与所述第一快照中的数据块的指纹不同,将所述第一数据块、所述第一数据块的指纹和所述增加的数据块的元数据发送给所述容灾端设备。本发明专利技术实施例提高了远程复制容灾备份的性能。

【技术实现步骤摘要】
【专利摘要】本专利技术实施例提供一种基于重复数据删除的远程复制方法及装置。本专利技术基于重复数据删除的远程复制方法,应用于远程复制系统中,所述系统包括:主端设备和容灾端设备,所述主端设备和所述容灾端设备均存储第一快照,所述方法包括:主端设备获取所述主端设备的第二快照;所述主端设备判断所述第二快照中相对第一快照增加的数据块的指纹是否与所述第一快照中的数据块的指纹相同;当所述增加的数据块中的第一数据块的指纹与所述第一快照中的数据块的指纹不同,将所述第一数据块、所述第一数据块的指纹和所述增加的数据块的元数据发送给所述容灾端设备。本专利技术实施例提高了远程复制容灾备份的性能。【专利说明】基于重复数据删除的远程复制方法及装置
本专利技术实施例涉及计算机
,尤其涉及一种基于重复数据删除的远程复制方法及装置。
技术介绍
重复数据删除是一种数据缩减技术,旨在减少存储系统中使用的存储容量。查找不同数据中不同位置的重复可变大小数据块,将这些重复的数据块用指示符取代,从而缩减存储的数据量。高度冗余的数据集(例如备份数据)从数据重复删除技术的获益极大,用户可以实现10比I至50比I的缩减比。远程复制是一种容灾技术,指将主端设备的数据复制到远程的容灾端设备,当主端设备的数据发生损坏时,可以通过容灾端设备将数据恢复出来。 如果将重复数据删除技术运用于远程复制当中,就可以减少数据的传输量,降低带宽的使用和减小复制的窗口。现有技术中基于重复数据删除的远程复制方案,是将主端设备的待复制数据与前一次已复制数据的差异数据的指纹发送到容灾端设备进行查询,容灾端设备加载指纹,查询主端设备的所述差异数据的指纹是否存在于容灾端设备,并将存在于容灾端设备的指纹发送给主端设备,如果指纹在容灾端设备中存在,那么认为所述差异数据存在于容灾端设备,如果指纹在容灾端设备不存在,那么所述差异数据不存在于容灾端设备,需要主端设备将所述差异数据发送到容灾端设备。 然而,现有技术中存在的问题是,指纹查询操作太繁琐,指纹查询过程增加网络交互,占用较多网络带宽。
技术实现思路
本专利技术实施例提供一种基于重复数据删除的远程复制方法及装置,以克服现有技术中指纹查询操作太繁琐,指纹查询过程增加网络交互,占用较多网络带宽的问题。 第一方面,本专利技术实施例提供一种基于重复数据删除的远程复制方法,应用于远程复制系统中,所述系统包括:主端设备和容灾端设备,所述主端设备和所述容灾端设备均存储第一快照,所述方法包括: 所述主端设备获取所述主端设备的第二快照; 所述主端设备判断所述第二快照中相对所述第一快照增加的数据块的指纹是否与所述第一快照中的数据块的指纹相同; 当所述增加的数据块中的第一数据块的指纹与所述第一快照中的数据块的指纹不同,将所述第一数据块、所述第一数据块的指纹和所述增加的数据块的元数据发送给所述容灾端设备。 结合第一方面,在第一方面的第一种可能的实现方式中,所述主端设备判断所述第二快照中相对所述第一快照增加的数据块的指纹是否与所述第一快照中的数据块的指纹相同,包括: 所述主端设备获取所述第一快照的第一事务号以及所述增加的数据块中的每个数据块的指纹的第二事务号; 判断所述第二事务号是否大于所述第一事务号,若所述第一数据块的指纹的第二事务号大于所述第一事务号,则所述第一数据块的指纹与所述第一快照中的数据块的指纹不同,所述增加的数据块中除所述第一数据块外的数据块的指纹与所述第一快照中的数据块的指纹相同。 结合第一方面,在第一方面的第二种可能的实现方式中,所述主端设备判断所述第二快照中相对所述第一快照增加的数据块的指纹是否与所述第一快照中的数据块的指纹相同,包括: 所述主端设备获取差异记录;所述差异记录用于记录所述增加的数据块; 所述处理模块,具体用于: 判断所述差异记录中记录的所述增加的数据块的指纹是否与所述第一快照中的数据块的指纹相同。 结合第一方面、或第一方面的第一、第二种可能的实现方式,在第一方面的第三种可能的实现方式中,还包括: 当所述增加的数据块中的第一数据块的指纹与所述第一快照中的数据块的指纹相同,则不复制所述第一数据块至所述容灾端设备。 第二方面,本专利技术实施例提供一种基于重复数据删除的远程复制方法,应用于远程复制系统中,所述系统包括:主端设备和容灾端设备,所述主端设备和所述容灾端设备均存储第一快照,所述方法包括: 所述主端设备获取所述主端设备的第二快照; 所述主端设备获取差异记录;所述差异记录用于记录所述第二快照中相对所述第一快照增加的数据块; 所述主端设备获取所述增加的数据块的指纹; 所述主端设备将所述增加的数据块的指纹发送给所述容灾端设备,用于使所述容灾端设备判断所述增加的数据块的指纹是否已经存在于所述容灾端设备; 所述主端设备接收所述容灾端设备发送的查重信息,所述查重信息包含与所述第一快照中的数据块的指纹不同的所述增加的数据块中的第一数据块的指纹; 所述主端设备根据所述查重信息,将所述查重信息指示的所述第一数据块和所述增加的数据块的元数据发送给所述容灾端设备。 结合第二方面,在第二方面的第一种可能的实现方式中,所述主端设备获取所述增加的数据块的指纹,包括: 所述主端设备通过硬件加速卡获取所述增加的数据块的指纹。 第三方面,本专利技术实施例提供一种主端设备,包括: 存储模块,用于存储第一快照;所述第一快照也存储于容灾端设备; 获取模块,用于获取所述主端设备的第二快照; 处理模块,用于判断所述第二快照中相对所述第一快照增加的数据块的指纹是否与所述第一快照中的数据块的指纹相同; 发送模块,用于当所述增加的数据块中的第一数据块的指纹与所述第一快照中的数据块的指纹不同,将所述第一数据块、所述第一数据块的指纹和所述增加的数据块的元数据发送给所述容灾端设备。 结合第三方面,在第三方面的第一种可能的实现方式中,所述处理模块,具体用于: 获取所述第一快照的第一事务号以及所述增加的数据块中的每个数据块的指纹的第二事务号; 判断所述第二事务号是否大于所述第一事务号,若所述第一数据块的指纹的第二事务号大于所述第一事务号,则所述第一数据块的指纹与所述第一快照中的数据块的指纹不同,所述增加的数据块中除所述第一数据块外的数据块的指纹与所述第一快照中的数据块的指纹相同。 结合第三方面,在第三方面的第二种可能的实现方式中,所述获取模块,具体用于: 获取差异记录;所述差异记录用于记录所述增加的数据块; 所述处理模块,具体用于: 判断所述差异记录中记录的所述增加的数据块的指纹是否与所述第一快照中的数据块的指纹相同。 结合第三方面、或第三方面的第一、第二种可能的实现方式,在第一方面的第二种可能的实现方式中,所述处理模块,还用于: 当所述增加的数据块中的第一数据块的指纹与所述第一快照中的数据块的指纹相同,则不复制所述第一数据块至所述容灾端设备。 第四方面,本专利技术实施例提供一种主端设备,包括: 存储模块,用于存储第一快照;所述第一快照也存储于容灾端设备; 获取模块,用于获取所述主端设备的第二快照; 所述获取模块,还用于获取差异记录;所述差异记录用于记录所述第二快照中相对所述第一快照增加的数本文档来自技高网
...
基于重复数据删除的远程复制方法及装置

【技术保护点】
一种基于重复数据删除的远程复制方法,应用于远程复制系统中,所述系统包括:主端设备和容灾端设备,其特征在于,所述主端设备和所述容灾端设备均存储第一快照,所述方法包括:所述主端设备获取所述主端设备的第二快照;所述主端设备判断所述第二快照中相对所述第一快照增加的数据块的指纹是否与所述第一快照中的数据块的指纹相同;当所述增加的数据块中的第一数据块的指纹与所述第一快照中的数据块的指纹不同,将所述第一数据块、所述第一数据块的指纹和所述增加的数据块的元数据发送给所述容灾端设备。

【技术特征摘要】

【专利技术属性】
技术研发人员:钟延辉张程伟
申请(专利权)人:华为技术有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1