一种数据处理方法及相关设备技术

技术编号:24409363 阅读:28 留言:0更新日期:2020-06-06 08:29
本申请实施例提供了一种数据处理方法及相关设备,可以在向存储系统存储数据时,减少资源占用,降低上传耗时,同时又可以提高数据存储的安全性,且可以从存储系统读取指定库表的数据。该方法包括:获取目标备份结果文件;将所述目标备份结果文件转换成文件流,得到第一文件流;对所述第一文件流进行标准化处理,得到标准文件流;将所述标准文件流存储至N个存储系统,其中,N为大于或等于2的正整数。

A data processing method and related equipment

【技术实现步骤摘要】
一种数据处理方法及相关设备
本申请涉及通信领域,尤其涉及一种数据处理方法及相关设备。
技术介绍
数据备份是容灾的基础,是指为防止系统出现操作失误或系统故障导致数据丢失,而将全部或部分数据集合从应用主机的硬盘或阵列复制到其它的存储介质的过程。云计算时代,数据库的数据的备份结果文件一般会选择保存到云存储中。但是,在备份的过程中,备份时需要先落本地磁盘中,然后再上传到存储系统,这样就会导致占用资源多,耗时长。
技术实现思路
本申请提供了一种数据处理方法及相关设备,可以减少资源占用,降低上传耗时,同时又可以提高备份的安全性。本申请实施例第一方面提供一种数据处理方法,包括:获取目标备份结果文件;将所述目标备份结果文件转换成文件流,得到第一文件流;对所述第一文件流进行标准化处理,得到标准文件流;将所述标准文件流存储至N个存储系统,其中,N为大于或等于2的正整数。可选地,所述方法还包括:获取所述目标备份结果文件对应的目标元数据文件,所述目标元数据文件包括所述目标备份结果文件的本文档来自技高网...

【技术保护点】
1.一种数据处理方法,其特征在于,包括:/n获取目标备份结果文件;/n将所述目标备份结果文件转换成文件流,得到第一文件流;/n对所述第一文件流进行标准化处理,得到标准文件流;/n将所述标准文件流存储至N个存储系统,其中,N为大于或等于2的正整数。/n

【技术特征摘要】
1.一种数据处理方法,其特征在于,包括:
获取目标备份结果文件;
将所述目标备份结果文件转换成文件流,得到第一文件流;
对所述第一文件流进行标准化处理,得到标准文件流;
将所述标准文件流存储至N个存储系统,其中,N为大于或等于2的正整数。


2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取所述目标备份结果文件对应的目标元数据文件,所述目标元数据文件包括所述目标备份结果文件的库表位点信息以及所述目标备份结果文件的校验信息;
将所述目标元数据文件存储至所述N个存储系统。


3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
获取第一元数据文件;
根据所述第一元数据文件从所述N个存储系统获取第一备份结果文件;
通过所述第一元数据文件中的校验信息对所述第一备份结果文件校验;
当校验通过时,确定所述第一备份结果文件的备份类型;
根据所述备份类型将所述第一备份结果文件导入第一实例。


4.根据权利要求3所述的方法,其特征在于,所述备份类型为逻辑备份,所述根据所述备份类型将所述第一备份结果文件导入第一实例包括:
将所述第一备份结果文件导入所述第一实例。


5.根据权利要求3所述的方法,其特征在于,所述备份类型为物理备份,所述根据所述备份类型将所述第一备份结果文件导入第一实例包括:
将所述第一备份结果文件导入第一临时目录;
通过所述第一元数据文件中的第一日志对所述第一临时目录执行回放操作,得到第二临时目录;
终止所述第一实例中的目标进程;
将所述第一实例的数据目录替换为所述第二临时目录;
重启所述目标进程,以将所述第一备份结果文件导入所述第一实例。


6.根据权利要求2所述的方法,其特征在于,所述方法还包括:
获取第二元数据文件;
根据所述第二元数据文件从所述N个存储系统获取第一指定备份结果文件对应的数据块;
按照第一预设规则将所述第一指定备份结果文件对应的数据块导入第二实例。


7.根据权利要求6所述的方法,其特征在于,所述根据所述第二元数据文件从所述N个存储系统获取第一指定备份结果文件对...

【专利技术属性】
技术研发人员:张棚飞
申请(专利权)人:腾讯科技深圳有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1