一种分布式文件存储系统技术方案

技术编号:16975035 阅读:495 留言:0更新日期:2018-01-07 09:50
本发明专利技术提供了一种分布式文件存储系统,包括数据存储服务器集群子系统和文件管理服务器集群子系统,文件管理服务器集群子系统包括至少两个存储卷,每个存储卷至少包括两个存储节点服务器,卷内各个存储节点服务器互为备份和镜像,且各卷内存储节点服务器的存储容量的差值小于第一设定值;所述文件管理服务器集群子系统用于客户文件上传、存储管理和存储服务器集群同步。本发明专利技术提供了一个海量、超大规模、可扩展、松耦合的分布式文件系统,在性能上得到了大幅度的提高,在动态扩展上得到了极大的改善,可支持文件秒传、流媒体实时播放、超大数据文件存储、多用户文件共享和保护,为目前大数据时代的数据存储技术提供了基础服务。

【技术实现步骤摘要】
一种分布式文件存储系统
本专利技术属于数据存储
,特别涉及一种分布式文件存储系统。
技术介绍
文件系统是操作系统用来组织磁盘文件的方法和数据结构,计算机通过文件系统管理、存储数据。大数据时代海量信息爆炸式的增长,使得数据存储容量需求成指数级增长。单文件系统通过增加硬盘容量和个数来拓展文件系统存储容量的方式,在容量大小、容量增长速度、数据备份、数据安全和管理等方面的表现都差强人意。分布式文件系统可以有效解决这个数据的存储和管理难题。一台普通或者专用计算机,通过添加服务对外提供远程文件访问。将位于不同地点的文件服务器进行集群,提供网络用户文件访问、目录并发控制和文件安全共享措施,便形成了一个分布式文件系统(DistributedFileSystem,DFS)。这个DFS通过网络进行节点间的通信和数据传输,提供全网统一的文件系统管理。用户在使用分布式文件系统时,无需关心数据是存储在哪个节点上、或者是从哪个节点从获取的,只需要像使用本地文件系统一样管理和存储文件系统中的数据。DFS将服务范围扩展到了整个网络,不仅改变了数据的存储和管理方式,也拥有了本地文件系统所无法具备的数据备份、数据本文档来自技高网...
一种分布式文件存储系统

【技术保护点】
一种分布式文件存储系统,其特征在于,包括数据存储服务器集群子系统和文件管理服务器集群子系统,所述数据存储服务器集群子系统和所述文件管理服务器集群子系统连接,所述数据存储服务器集群子系统包括至少两个存储卷,每个存储卷至少包括两个存储节点服务器,卷内各个存储节点服务器互为备份和镜像,且各卷内存储节点服务器的存储容量的差值小于第一设定值;所述文件管理服务器集群子系统用于客户文件上传、存储管理和存储服务器集群同步。

【技术特征摘要】
1.一种分布式文件存储系统,其特征在于,包括数据存储服务器集群子系统和文件管理服务器集群子系统,所述数据存储服务器集群子系统和所述文件管理服务器集群子系统连接,所述数据存储服务器集群子系统包括至少两个存储卷,每个存储卷至少包括两个存储节点服务器,卷内各个存储节点服务器互为备份和镜像,且各卷内存储节点服务器的存储容量的差值小于第一设定值;所述文件管理服务器集群子系统用于客户文件上传、存储管理和存储服务器集群同步。2.根据权利要求1所述的分布式文件存储系统,其特征在于,当文件的大小大于第二设定值时,按照卷的总数进行分片,将所述文件分散存储到对应的卷上,并对卷内存储的文件进行同步。3.根据权利要求2所述的分布式文件存储系统,其特征在于,采用指数分裂的方式对卷内文件进行同步。4.根据权利要求1所述的分布式文件存储系统,其特征在于,所述文件管理服务器集群子系统包括负载均衡服务器、文件管理服务器集群及数据库存储集群。5.根据权利要求4所述的分布式文件存储系统,其特征在于,外网用户访问内部服务器时,负载均衡服务器响应一个最优的IP地址,外网用户根据所述最优的IP地址对内部服务器进行访问,所述最优的IP地址由该IP上分配的客户端数和机器的承载能力决定的。6.根据权利要求4所述的分布式文件存储系统,其特征在于,内...

【专利技术属性】
技术研发人员:王合闯白娟李秀丽
申请(专利权)人:华北水利水电大学
类型:发明
国别省市:河南,41

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1