一种数据分片的传输方法、装置及计算机设备制造方法及图纸

技术编号:28034912 阅读:104 留言:0更新日期:2021-04-09 23:16
本发明专利技术公开了一种数据分片的传输方法、装置及计算机设备,其中,该传输方法包括:分别为各目标分片文件分配唯一标识码;根据各目标分片文件的唯一标识码,获取各目标分片文件的元属性信息;根据元属性信息确定各目标分片文件的原始排列顺序;当接收到合并分片请求时,根据原始排列顺序及各目标分片文件的元属性信息,生成合并元属性信息列表。通过实施本发明专利技术,解决了相关技术中存在的数据读写次数较多,导致服务器吞吐能力较差的问题,结合分别为各分片文件分配唯一标识码及生成的合并元属性信息列表,实现了各分片文件的逻辑合并,无需拼接生成新文件,可以保证文件上传时的序列性,简化操作步骤,提高服务器的数据吞吐能力以及用户的体验。

【技术实现步骤摘要】
一种数据分片的传输方法、装置及计算机设备
本专利技术涉及数据存储领域,具体涉及一种数据分片的传输方法、装置及计算机设备。
技术介绍
相关技术中,在数据分片上传存储的过程中,通常是将文件预先切割为多个特定大小的小数据片,继而再将上述所有小数据片上传到服务端,全部上传完后再在服务端将这些数据片合并成为一个资源。具体地,是根据标识码(ID)分别上传各分片,在分片全部上传完成后,根据合并分片请求在本地文件系统中对每一个分片进行读取,合并后再存储于服务器存储器中。但是,由于分片数据需要在服务端将已保存的数据完全读取,拼接成一个新文件后写入服务器存储器,导致数据读写次数过多,服务器吞吐能力降低,以及用户体验较差。
技术实现思路
有鉴于此,本专利技术实施例提供了一种数据分片的传输方法、装置及计算机设备,以解决相关技术中存在的目标分片文件上传过程中,数据读写次数过多,导致的服务器吞吐能力降低以及用户体验较差的问题。根据第一方面,本专利技术实施例提供了一种数据分片的传输方法,包括:分别为各目标分片文件分配唯一标识码;根据各所述目标分片本文档来自技高网...

【技术保护点】
1.一种数据分片的传输方法,其特征在于,包括:/n分别为各目标分片文件分配唯一标识码;/n根据各所述目标分片文件的唯一标识码,获取各目标分片文件的元属性信息,所述元属性信息包括分片列表位置信息、目标分片文件创建时间信息、索引标识信息;/n根据所述元属性信息确定各目标分片文件的原始排列顺序;/n当接收到合并分片请求时,根据所述原始排列顺序及所述各目标分片文件的元属性信息,生成合并元属性信息列表。/n

【技术特征摘要】
1.一种数据分片的传输方法,其特征在于,包括:
分别为各目标分片文件分配唯一标识码;
根据各所述目标分片文件的唯一标识码,获取各目标分片文件的元属性信息,所述元属性信息包括分片列表位置信息、目标分片文件创建时间信息、索引标识信息;
根据所述元属性信息确定各目标分片文件的原始排列顺序;
当接收到合并分片请求时,根据所述原始排列顺序及所述各目标分片文件的元属性信息,生成合并元属性信息列表。


2.根据权利要求1所述的方法,其特征在于,还包括:
根据各所述目标分片文件的唯一标识码,创建各目标分片文件的存储路径,并存储所述存储路径的信息。


3.根据权利要求1所述的方法,其特征在于,还包括:存储所述合并元属性信息列表。


4.根据权利要求1所述的方法,其特征在于,在所述分别为各目标分片文件分配唯一标识码的步骤之前,还包括:
获取多个目标分片文件的上传请求;
根据所述上传请求执行所述分别为各目标分片文件分配唯一标识码的步骤。


5.一种数据分片的传输方法,其特征在于,包括:
获取文件访问请求,所述文件访问请求中包括各目标分片文件的分片列表位置信息;
根据所述分片列表位置信息以及合并元属性信息列表,确定各目标分片文件的存储路径信息,所述合并元属性信息列表是根据权利要求1-4任一项所述的方法生成的;
根据各目标分片文件的存储路径信息,依次提取各所述目标分片文件。


6.根据权利要求5所述的方法,其特征在于,还包括:将提取的各所述目标分片文件发送至发起所述文件访问请求的设备。


7.根据权利要求5所述的方法,其特征在于,所述文件访问请求还包括各目标分片文件的实体标签信息;所述元属性信息还包括用户自定义元属性信息以及实体标签信息,在根据各目标分片文件...

【专利技术属性】
技术研发人员:王然苏国忠潘家铭马鹤鸣
申请(专利权)人:华录光存储研究院大连有限公司
类型:发明
国别省市:辽宁;21

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1