【技术实现步骤摘要】
本申请涉及通信,尤其涉及一种数据处理方法、装置及存储介质。
技术介绍
1、目前,在分布式文件存储系统ceph中,用户在对文件进行备份时通常会利用复制copy命令进行拷贝,如对文件1进行拷贝得到文件2。通用技术中需要通过客户端先从cephfs集群中读取出文件1的数据,再将读取出的数据写入到文件2中。但是这样一来,文件的数据需要进行一次读操作和一次写操作,文件的数据在网络中传输了两次,进而造成网络带宽的浪费。
技术实现思路
1、本申请提供一种数据处理方法、装置及存储介质,用于解决文件拷贝时需要在网络中传输两次进而造成带宽浪费的问题。
2、为达到上述目的,本申请采用如下技术方案:
3、第一方面,提供一种数据处理方法,包括:确定第一指令;其中,第一指令用于指示拷贝源文件;响应于第一指令,将源文件分片,确定多个源分片文件;确定每一源分片文件对应的存储节点,并向每一源分片文件对应的存储节点发送第二指令;第二指令用于指示向目标节点发送源分片文件。
4、可选的,确定每一
...【技术保护点】
1.一种数据处理方法,其特征在于,应用于客户端,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述确定每一所述源分片文件对应的存储节点,包括:
3.根据权利要求2所述的方法,其特征在于,所述响应于所述第一指令,将所述源文件分片,确定多个源分片文件,包括:
4.根据权利要求3所述的方法,其特征在于,所述确定第一指令,包括:
5.一种数据处理方法,其特征在于,应用于第一节点,所述方法包括:
6.根据权利要求5所述的方法,其特征在于,所述第二指令中包括:所述第一文件对应的对象名;所述响应于所述第二指令,
...【技术特征摘要】
1.一种数据处理方法,其特征在于,应用于客户端,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述确定每一所述源分片文件对应的存储节点,包括:
3.根据权利要求2所述的方法,其特征在于,所述响应于所述第一指令,将所述源文件分片,确定多个源分片文件,包括:
4.根据权利要求3所述的方法,其特征在于,所述确定第一指令,包括:
5.一种数据处理方法,其特征在于,应用于第一节点,所述方法包括:
6.根据权利要求5所述的方法,其特征在于,所述第二指令中包括:所述第一文件对应的对象名;所述响应于所述第二指令,读取所述第一节点中存储的所述第一文件的文件数据,包括:
7.根据权利要求6所述的方法,其特征在于,所述第二指令中包括:目标文件的第二标识;所述向第二节点发送所述...
【专利技术属性】
技术研发人员:唐蜜,过晓春,
申请(专利权)人:中国联合网络通信集团有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。