【技术实现步骤摘要】
一种通过数据库实现文件系统到对象存储差异比较与备份的方法
本专利技术属于计算机
，特别是数据容灾备份领域，涉及一种通过数据库实现文件系统到对象存储差异比较与备份的方法。
技术介绍
对象存储是面向非结构化数据，支持HTTP/HTTPS协议访问的分布式存储，其特点是支持海量文件、高并发访问、成本较低。对象存储因支持海量文件和成本较低的特点被应用到数据容灾备份领域，将传统的文件系统的文件备份到对象存储。部署示意图如图1，同步主机从左边的文件系统(通常是NAS/SAN/DAS)读取文件内容，然后通过HTTP/HTTPS传输到对象存储。要实现文件系统到对象存储的备份，必须首先解决差异比较的问题，因为备份通常是定时的，不可能每次备份都进行全量备份，而是只针对差异的文件或者文件片段进行备份。常规的比较方法是分别扫描文件系统和对应的对象存储来获取文件的属性和摘要信息，然后对文件系统的文件和对象存储的文件的属性和摘要信息进行比较，获得差异的文件，然后将这些差异的文件备份到对象存储。这种方法的缺点是，每次备份都需要扫描对象...
【技术保护点】
1.一种通过数据库实现文件系统到对象存储差异比较与备份的方法，包括如下步骤：/n扫描文件系统指定的目录和文件，保存目录记录，该目录记录是由文件的属性信息或者属性和摘要信息构成，该属性包括路径、文件名、大小、修改时间，该摘要是指MD5值，目录记录保存在数据库表中；/n将本次扫描保存的目录记录与已备份的目录记录进行比较，判断是否为新增目录记录，文件是否为新增文件，文件的属性是否相同；/n如果已备份的目录记录中所包含的某个目录，在本次扫描时没有被扫描到，则将该已备份的目录记录标记为孤儿目录；/n如果已备份的某个目录记录中所包含的某些文件，在本次扫描时没有被扫描到，则将该已备份的文...
【技术特征摘要】
1.一种通过数据库实现文件系统到对象存储差异比较与备份的方法，包括如下步骤：
扫描文件系统指定的目录和文件，保存目录记录，该目录记录是由文件的属性信息或者属性和摘要信息构成，该属性包括路径、文件名、大小、修改时间，该摘要是指MD5值，目录记录保存在数据库表中；
将本次扫描保存的目录记录与已备份的目录记录进行比较，判断是否为新增目录记录，文件是否为新增文件，文件的属性是否相同；
如果已备份的目录记录中所包含的某个目录，在本次扫描时没有被扫描到，则将该已备份的目录记录标记为孤儿目录；
如果已备份的某个目录记录中所包含的某些文件，在本次扫描时没有被扫描到，则将该已备份的文件标记为孤儿文件；
读取新增目录记录、新增文件、属性不相同的文件内容并同步到对象存储，计算文件的摘要信息，同步完成后由对象存储返回根据存入数据计算的摘要信息，当两者相同时实现文件成功备份；
同步完成之后，根据孤儿文件处理策略，对对象存储上的孤儿目录和文件进行不做处理、删除或移动到指定目录的处理。
2.如权利要求1所述的方法，其特征在于，每次扫描在数据库中生成一张新的表，该表用于记录如下4个字段：路径、文件集、压缩、孤儿目录，其中路径是指保存目录的路径，文件集是采用JSON的数据结构保存文件名、大小、修改时间、摘要信息，压缩用于记录文件是否被压缩，孤儿目录用于记录是否为孤儿目录。
3.如权利要求2所述的方法，其特征在于，如果扫描到某目录下含有文件，则向所述表中插入一条记录，用于记录该文件的文件属性，还可用于记录该文件的摘要信息。
4.如权利要求1所述的方法，其特征在于，在比较之前，将已备份的目录记录的“孤儿目录”字段标记成是孤儿目录；在比较之后，将与本次扫描保存的目录记录相对应的已备份的目录记录的“孤儿目录”字段标记成非孤儿目录...
【专利技术属性】
技术研发人员：吕爱民，周华，甘磊，连恒，
申请(专利权)人：上海英方软件股份有限公司，
类型：发明
国别省市：上海;31
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。