一种对象拷贝方法、装置、设备及存储介质制造方法及图纸

本发明专利技术公开了一种对象拷贝方法、装置、设备及存储介质；在本方案中，查找待拷贝的目标对象后，先将目标对象的目标元数据拷贝至内存，将内存中的目标元数据写入拷贝的目的位置，并利用目标元数据在目的位置下创建软连接，以便在目的位置下通过软连接访问目标对象的真正数据；在满足真正数据拷贝条件后，根据目标元数据将目标对象的真正数据拷贝至内存，并将内存中的真正数据写入目的位置。可见，本方案进行对象拷贝时，可暂时不将目标对象的真正数据进行拷贝，从而避免出现内存暴涨、IO过大的问题，并且通过创建软连接，还可以保证目标对象的正常访问，提高了对象的拷贝效率，为用户带来了良好的使用体验。用户带来了良好的使用体验。用户带来了良好的使用体验。

【技术实现步骤摘要】
一种对象拷贝方法、装置、设备及存储介质


[0001]本专利技术涉及对象拷贝
，更具体地说，涉及一种对象拷贝方法、装置、设备及存储介质。

技术介绍

[0002]分布式对象存储系统指的是针对非结构化数据对象的分布式存储系统，当前的分布式对象存储系统中，已经实现对象间的拷贝操作，该拷贝操作具体可以为：将一个对象从一个桶拷贝到另一个桶中，或者将此对象从桶中的一个目录下拷贝到另一个目录下，也即：目前已经实现基本的拷贝功能。但是目前的拷贝流程比较复杂，目前的拷贝流程为：head请求，检查源桶内是否有此对象；get请求，将此对象下载到内存里面；put请求，将get到内存中的对象重新写入到新桶中。通过这种方式拷贝对象会在集群中增加很多IO(Input/Output，输入/输出)，若是批量移动对象，则会出现内存暴涨的现象，从而影响客户前端业务，进而带来不好的用户体验，因此由拷贝产生的大批量IO对集群的性能以及稳定性是巨大的挑战。

技术实现思路

[0003]本专利技术的目的在于提供一种对象拷贝方法、装置、设备及存储介质，以在对象拷贝时，尽量避免出现内存暴涨、IO过大等问题。
[0004]为实现上述目的，本专利技术提供一种对象拷贝方法，包括：
[0005]查找待拷贝的目标对象；
[0006]将所述目标对象的目标元数据拷贝至内存；
[0007]将所述内存中的所述目标元数据写入拷贝的目的位置；
[0008]利用所述目标元数据在所述目的位置下创建软连接，以便在所述目的位置下通过所述软连接访问所述目标对象的真正数据；
[0009]在满足真正数据拷贝条件后，根据所述目标元数据将所述目标对象的真正数据拷贝至所述内存，并将所述内存中的所述真正数据写入所述目的位置。
[0010]其中，所述查找待拷贝的目标对象之后，还包括：
[0011]检测数据访问请求量是否大于第一阈值；
[0012]若是，则继续执行所述将所述目标对象的目标元数据拷贝至内存的步骤；
[0013]若否，则将所述目标对象的目标元数据及真正数据均拷贝至内存，并将所述内存中的所述目标元数据及所述真正数据写入目的位置。
[0014]其中，所述查找待拷贝的目标对象之后，还包括：
[0015]检测数据拷贝请求量是否大于第二阈值；
[0016]若是，则继续执行所述将所述目标对象的目标元数据拷贝至内存的步骤；
[0017]若否，则将所述目标对象的目标元数据及真正数据均拷贝至内存，并将所述内存中的所述目标元数据及所述真正数据写入目的位置。
[0018]其中，所述目的位置为：与所述目标对象位于同一桶内的不同目录下，或者与所述目标对象位于不同桶的目录下。
[0019]其中，所述在满足真正数据拷贝条件后，根据所述目标元数据将所述目标对象的真正数据拷贝至所述内存，并将所述内存中的所述真正数据写入所述目的位置，包括：
[0020]若检测到数据访问请求量不大于第一阈值，则根据所述目标元数据将所述目标对象的真正数据拷贝至所述内存；
[0021]将所述内存中的所述真正数据写入所述目的位置，并删除所述目的位置下的软连接。
[0022]其中，所述在满足真正数据拷贝条件后，根据所述目标元数据将所述目标对象的真正数据拷贝至所述内存，并将所述内存中的所述真正数据写入所述目的位置，包括：
[0023]若检测到数据拷贝请求量不大于第二阈值，则根据所述目标元数据将所述目标对象的真正数据拷贝至所述内存；
[0024]将所述内存中的所述真正数据写入所述目的位置，并删除所述目的位置下的软连接。
[0025]为实现上述目的，本专利技术进一步提供一种对象拷贝装置，包括：
[0026]查询模块，用于查找待拷贝的目标对象；
[0027]第一拷贝模块，用于将所述目标对象的目标元数据拷贝至内存；
[0028]第一写入模块，用于将所述内存中的所述目标元数据写入拷贝的目的位置；
[0029]创建模块，用于利用所述目标元数据在所述目的位置下创建软连接，以便在所述目的位置下通过所述软连接访问所述目标对象的真正数据；
[0030]第二拷贝模块，用于在满足真正数据拷贝条件后，根据所述目标元数据将所述目标对象的真正数据拷贝至所述内存；
[0031]第二写入模块，用于将所述内存中的所述真正数据写入所述目的位置。
[0032]其中，本方案还包括：
[0033]第一检测模块，用于检测数据访问请求量是否大于第一阈值；
[0034]所述第一拷贝模块，具体用于在数据访问请求量大于第一阈值时，将所述目标对象的目标元数据拷贝至内存；
[0035]第三拷贝模块，用于在数据访问请求量不大于第一阈值时将所述目标对象的目标元数据及真正数据均拷贝至内存；
[0036]第三写入模块，用于将所述内存中的所述目标元数据及所述真正数据写入目的位置。
[0037]为实现上述目的，本专利技术进一步提供一种电子设备，包括：
[0038]存储器，用于存储计算机程序；
[0039]处理器，用于执行所述计算机程序时实现上述对象拷贝方法的步骤。
[0040]为实现上述目的，本专利技术进一步提供一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述对象拷贝方法的步骤。
[0041]通过以上方案可知，本专利技术实施例提供的一种对象拷贝方法、装置、设备及存储介质；在本方案中，查找待拷贝的目标对象后，并不直接将目标对象拷贝至目的位置，而是先
将目标对象的目标元数据拷贝至内存，将内存中的目标元数据写入拷贝的目的位置，并利用目标元数据在目的位置下创建软连接，以便在目的位置下通过软连接访问目标对象的真正数据；在满足真正数据拷贝条件后，根据目标元数据将目标对象的真正数据拷贝至内存，并将内存中的真正数据写入所述目的位置。可见，本方案进行对象拷贝时，可暂时不将目标对象的真正数据进行拷贝，从而避免出现内存暴涨、IO过大的问题，并且通过创建软连接，还可以保证目标对象的正常访问，提高了对象的拷贝效率，为用户带来了良好的使用体验。
附图说明
[0042]为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0043]图1为本专利技术实施例公开的一种对象拷贝方法流程示意图；
[0044]图2为本专利技术实施例公开的一种对象拷贝装置示意图；
[0045]图3为本专利技术实施例公开的一种电子设备结构示意图。
具体实施方式
[0046]目前的对象拷贝方案，在业务量变大后内存会暴涨很多倍，极其容易影响到前端业务以及客户对产品的满意度。因此在本专利技术中，提出一种对象拷贝方法、装置、设备及存储介质，本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种对象拷贝方法，其特征在于，包括：查找待拷贝的目标对象；将所述目标对象的目标元数据拷贝至内存；将所述内存中的所述目标元数据写入拷贝的目的位置；利用所述目标元数据在所述目的位置下创建软连接，以便在所述目的位置下通过所述软连接访问所述目标对象的真正数据；在满足真正数据拷贝条件后，根据所述目标元数据将所述目标对象的真正数据拷贝至所述内存，并将所述内存中的所述真正数据写入所述目的位置。2.根据权利要求1所述的对象拷贝方法，其特征在于，所述查找待拷贝的目标对象之后，还包括：检测数据访问请求量是否大于第一阈值；若是，则继续执行所述将所述目标对象的目标元数据拷贝至内存的步骤；若否，则将所述目标对象的目标元数据及真正数据均拷贝至内存，并将所述内存中的所述目标元数据及所述真正数据写入目的位置。3.根据权利要求1所述的对象拷贝方法，其特征在于，所述查找待拷贝的目标对象之后，还包括：检测数据拷贝请求量是否大于第二阈值；若是，则继续执行所述将所述目标对象的目标元数据拷贝至内存的步骤；若否，则将所述目标对象的目标元数据及真正数据均拷贝至内存，并将所述内存中的所述目标元数据及所述真正数据写入目的位置。4.根据权利要求1所述的对象拷贝方法，其特征在于，所述目的位置为：与所述目标对象位于同一桶内的不同目录下，或者与所述目标对象位于不同桶的目录下。5.根据权利要求1至4中任意一项所述的对象拷贝方法，其特征在于，所述在满足真正数据拷贝条件后，根据所述目标元数据将所述目标对象的真正数据拷贝至所述内存，并将所述内存中的所述真正数据写入所述目的位置，包括：若检测到数据访问请求量不大于第一阈值，则根据所述目标元数据将所述目标对象的真正数据拷贝至所述内存；将所述内存中的所述真正数据写入所述目的位置，并删除所述目的位置下的软连接。6.根据权利要求1至4中任意一项所...

【专利技术属性】
技术研发人员：武模仁，李欢欢，任磊，何文龙，
申请(专利权)人：济南浪潮数据技术有限公司，
类型：发明
国别省市：