文件处理方法、服务器及计算机可读存储介质技术

技术编号:16546929 阅读:46 留言:0更新日期:2017-11-11 11:43
本发明专利技术提供一种文件处理方法、服务器及计算机可读存储介质,所述文件处理方法包括:获取待转移文件;判断当前预设文件的大小是否超过预定阈值;当所述当前预设文件的大小未超过预定阈值时,将所述待转移文件写入所述当前预设文件的尾部。根据本发明专利技术提供的文件处理方法、服务器及计算机可读存储介质,在获取到待转移文件时,首先判断当前用于存储待转移文件的预设文件的大小是否超过预定阈值,在其大小未超过预定阈值时,不会直接另存该待转移文件,而是将其写入当前的预设文件尾部,作为一种合并存储操作。本发明专利技术可以有效减少小文件的数量,以达到节约存储空间的效果。

File processing method, server and computer readable storage medium

The invention provides a server and a computer readable storage medium, file processing method, the document processing method comprises the following steps: acquiring to transfer files; determine the current default file size exceeds a predetermined threshold; when the current default file size does not exceed the predetermined threshold value, the transfer document is written in the end the current default file. According to the invention provides file processing method, server and computer readable storage medium, in access to transfer files, first determine the current default file storage to be transferred for whether the file size exceeds a predetermined threshold, the size does not exceed a predetermined threshold, not directly save the transfer files, but write it the default file for the current tail, as a combined storage operation. The invention can effectively reduce the number of small files, so as to save the storage space.

【技术实现步骤摘要】
文件处理方法、服务器及计算机可读存储介质
本专利技术涉及数据存储领域,具体涉及一种文件处理方法、服务器及计算机可读存储介质。
技术介绍
目前,一种通过计算机网络将多个节点相连,进行数据存储的文件系统,即分布式文件系统(DistributedFileSystem,DFS),有效的解决了文件系统管理的物理存储资源受限于本地节点存储空间大小的问题。采用分布式的文件系统管理方式,DFS可以极大程度的解决存储空间的扩展问题。HadoopDistributedFileSystem(分布式文件系统,简称HDFS)是一种能够运行在通用硬件设备上的分布式文件系统。它和已有的分布式文件系统有很多相似之处。和其他的分布式文件系统相比,HDFS是一个高容错系统,适合部署在廉价的硬件设备上。同时,HDFS能提供高吞吐量的数据访问能力,非常适合大规模数据集上的应用。类似于普通的Unix和Linux文件系统,HDFS允许对集群上的文件或目录进行一些常规的操作,并提供类似Unix和Linux文件系统的操作命令,例如:查看文件、移动文件、复制文件、删除文件、创建目录等。此外,由于HDFS是分布式文件系统,采用集群的方本文档来自技高网...
文件处理方法、服务器及计算机可读存储介质

【技术保护点】
一种文件处理方法,其特征在于,包括:获取待转移文件;判断当前预设文件的大小是否超过预定阈值;当所述当前预设文件的大小未超过预定阈值时,将所述待转移文件写入所述当前预设文件的尾部。

【技术特征摘要】
1.一种文件处理方法,其特征在于,包括:获取待转移文件;判断当前预设文件的大小是否超过预定阈值;当所述当前预设文件的大小未超过预定阈值时,将所述待转移文件写入所述当前预设文件的尾部。2.根据权利要求1所述的方法,其特征在于,当所述当前预设文件的大小超过预定阈值时,存储所述待转移文件。3.根据权利要求2所述的方法,其特征在于,在所述存储所述待转移文件之后,将存储的待转移文件设置为下一预设文件。4.根据权利要求2或3所述的方法,其特征在于,所述存储所述待转移文件的目录与所述当前预设文件所处的目录为同一目录。5.根据权利要求1所述的方法,其特征在于,所述获取待转移文件,包括:检测所述待转移文件从其创建到当前的持续时间是否达到移动文件预定的时间间隔;当持续时间达到所述时间间隔时,获取所述待转移文件。6.根据权利要求1所述的方法,其特征在于,在所述获取待转移文件之后、在所述判断当...

【专利技术属性】
技术研发人员:王绍节龙春万巍赵静宋丹劼
申请(专利权)人:中国科学院计算机网络信息中心
类型:发明
国别省市:北京,11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1