【技术实现步骤摘要】
一种文件聚合方法、装置、设备及可读存储介质
本申请涉及对象存储
,特别涉及一种文件聚合方法、文件聚合装置、文件聚合设备及计算机可读存储介质。
技术介绍
对象存储是目前云计算领域最重要的存储形式之一,以目录文件的方式存储数据,以对象接口方式对外提供服务是单机实现对象服务的重要方式,小文件的读写一直是存储系统性能的痛点,在对象存储中亦是如此,为了提高单个机器以文件为存储形式的对象存储的性能,相关技术会将文件系统中的小文件进行聚合。然而,相关技术需要在文件系统中进行小文件的聚合,导致聚合效率较低,对象接口的性能较差。因此,如何解决相关技术导致聚合效率较低,对象接口的性能较差的问题,是本领域技术人员需要解决的技术问题。
技术实现思路
有鉴于此,本申请的目的在于提供一种文件聚合方法、文件聚合装置、文件聚合设备及计算机可读存储介质,提高了聚合效率,避免了对对象接口造成较大的性能影响,对象接口性能较好。为解决上述技术问题,本申请提供了一种文件聚合方法,包括:将待写入文件放入写入队列,并更新 ...
【技术保护点】
1.一种文件聚合方法,其特征在于,包括:/n将待写入文件放入写入队列,并更新所述写入队列对应的B+树;/n根据所述B+树在所述写入队列中确定待聚合文件,并对所述待聚合文件进行聚合处理,得到聚合文件;/n调用对象接口将所述聚合文件写入文件系统。/n
【技术特征摘要】
1.一种文件聚合方法,其特征在于,包括:
将待写入文件放入写入队列,并更新所述写入队列对应的B+树;
根据所述B+树在所述写入队列中确定待聚合文件,并对所述待聚合文件进行聚合处理,得到聚合文件;
调用对象接口将所述聚合文件写入文件系统。
2.根据权利要求1所述的文件聚合方法,其特征在于,所述将待写入文件放入写入队列,并更新所述写入队列对应的B+树,包括:
将所述待写入文件放入所述写入队列;
从所述待写入文件的元数据中提取排序信息,并利用所述排序信息对所述B+树进行更新。
3.根据权利要求2所述的文件聚合方法,其特征在于,所述从所述元数据信息中提取排序信息,包括:
从所述元数据中提取存储路径信息作为所述排序信息。
4.根据权利要求2所述的文件聚合方法,其特征在于,利用所述排序信息对所述B+树进行更新,包括:
根据所述排序信息在所述B+树中新增节点;
或,
根据所述排序信息对所述B+树中的节点进行调整。
5.根据权利要求1所述的文件聚合方法,其特征在于,所述根据所述B+树在所述写入队列中确定待聚合文件,并对所述待聚合文件进行聚合处理,得到聚合文件,包括:
遍历所述B+树的各个节点,并判断各个所述节点对应的待写入文件的文件体积是否小于预设阈值;
若所述文件体积小于所述预设阈值,则将对应的所述待写入文件确认为所述待聚合文件;
若当前的...
【专利技术属性】
技术研发人员:吴昊,
申请(专利权)人:苏州浪潮智能科技有限公司,
类型:发明
国别省市:江苏;32
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。