分布式文件系统的读方法、客户端设备及分布式文件系统技术方案

本发明专利技术实施例提供的一种分布式文件系统的读方法、客户端设备及分布式文件系统，可以在进行读操作时，首先在客户端设备本地寻找所需的元数据信息。在客户端设备本地存储有所需的元数据信息时，本发明专利技术可以直接根据客户端设备本地存储的元数据信息确定所要读取的文件在存储服务器中的存储地址，不再需要从元数据服务器中获取元数据信息，更加方便快捷，节省了时间。相应的，本发明专利技术执行读操作的速度也较快。

【技术实现步骤摘要】

本专利技术涉及分布式文件系统
，特别是涉及分布式文件系统的读方法、客户端设备及分布式文件系统。
技术介绍
分布式文件系统(DistributedFileSystem)是一种基于客户机/服务器模式的文件管理系统，其中，分布式文件系统中的客户机即为客户端设备，分布式文件系统中的服务器包括存储服务器及元数据服务器。分布式文件系统中的数据可以存储在存储服务器中，客户端设备通过网络与存储服务器、元数据服务器连接，在获得元数据服务器中存储的元数据信息后，就可以确定所要读取的数据所对应的地址并从存储服务器获取所要读取的数据。现有的分布式文件系统的读方法在每次对文件进行读操作时，都需要先向元数据服务器请求查询对应的元数据信息，然后通过获得的元数据信息再到存储服务器中获取文件数据。由于每一次进行读操作都需要从元数据服务器中请求元数据信息，因此现有的分布式文件系统的读方法花费的时间较多，相应的，现有的分布式文件系统读操作的速度也较慢。
技术实现思路
本专利技术实施例的目的在于提供分布式文件系统的读方法、客户端设备及分布式文件系统，以减少分布式文件系统进行数据读取花费的时间，并提高分布式文件系统读操作的速度。为达到上述目的，本专利技术实施例公开了一种分布式文件系统的读方法，所述分布式文件系统至少包括：客户端设备、存储服务器和元数据服务器，所述客户端设备分别与元数据服务器、存储服务器通信连接，所述读方法应用于客户端设备，所述方法包括：获得针对所要读取的文件的读指令；根据所述读指令确定所要读取的文件的标识；从所述客户端设备本地获取与所述标识对应的元数据信息，根据所述元数据信息确定所述所要读取的文件在所述存储服务器中的存储地址，其中，所述客户端设备本地存储的元数据信息从所述元数据服务器获取得到或者从位于同一客户端设备组的其他客户端设备获取得到；从所述存储服务器中的所述存储地址中获取所述所要读取的文件。可选的，还包括：在所述客户端设备本地未存储有与所述标识对应的元数据信息时，向所述元数据服务器发送元数据信息获取请求，所述请求中包含有所述标识；获得所述元数据服务器返回的元数据信息并存储在所述客户端设备本地，根据所述元数据服务器返回的元数据信息确定所述所要读取的文件在所述存储服务器中的存储地址。可选的，所述元数据信息中包含有：文件的标识及与文件的标识对应的存储地址。可选的，在获得针对所要读取的文件的读指令前，所述方法还包括：向所述元数据服务器发送元数据信息备份请求；获得所述元数据服务器发送的多个元数据信息，以对所述元数据服务器中的元数据信息进行备份。可选的，在对所述元数据服务器中的元数据信息进行备份后，所述方法还包括：按照预设的更新时间周期，向所述元数据服务器发送元数据信息更新请求；获得所述元数据服务器发送的更新数据并更新所述客户端设备本地存储的元数据信息。可选的，所述文件的标识包括：文件编号和文件块号。可选的，所述分布式文件系统中包括有至少一个客户端设备组，每个所述客户端设备组中包括至少两个客户端设备，任一客户端设备中均备份有该客户端设备所在的客户端设备组中其他客户端设备存储的元数据信息。可选的，所述从所述存储服务器中的所述存储地址中获取所述所要读取的文件，包括：确定根据所述元数据信息所确定的多个存储地址所在的存储服务器的数量；在所述数量不小于两个时，获得所述多个存储地址所在的存储服务器的硬件参数信息和/或运行参数信息；根据所获得的存储服务器的参数信息从所述多个存储地址所在的存储服务器中选择一个作为读取服务器；从所述读取服务器对应的存储地址中获取所述所要读取的文件。可选的，所述运行参数信息至少包括运行负载信息，所述硬件参数信息至少包括：存储服务器的可用空间信息。一种分布式文件系统中的客户端设备，所述分布式文件系统至少包括：客户端设备、存储服务器和元数据服务器，所述客户端设备分别与元数据服务器、存储服务器通信连接，所述客户端设备包括：读指令获得单元、标识确定单元、第一地址确定单元和文件读取单元；所述读指令获得单元，用于获得针对所要读取的文件的读指令；所述标识确定单元，用于根据所述读指令确定所要读取的文件的标识；所述第一地址确定单元，用于从所述客户端设备本地获取与所述标识对应的元数据信息，根据所述元数据信息确定所述所要读取的文件在所述存储服务器中的存储地址，其中，所述客户端设备本地存储的元数据信息从所述元数据服务器获取得到或者从位于同一客户端设备组的其他客户端设备获取得到；所述文件读取单元，用于从所述存储服务器中的所述存储地址中获取所述所要读取的文件。可选的，还包括：元数据请求单元、元数据存储单元和第二地址确定单元，所述元数据请求单元，用于在所述客户端设备本地未存储有与所述标识对应的元数据信息时，向所述元数据服务器发送元数据信息获取请求，所述请求中包含有所述标识；所述元数据存储单元，用于获得所述元数据服务器返回的元数据信息并存储在所述客户端设备本地；所述第二地址确定单元，用于根据所述元数据服务器返回的元数据信息确定所述所要读取的文件在所述存储服务器中的存储地址。可选的，所述元数据信息中包含有：文件的标识及与文件的标识对应的存储地址。可选的，还包括：备份请求单元和备份单元，所述备份请求单元，用于在所述读指令获得单元获得针对所要读取的文件的读指令前，向所述元数据服务器发送元数据信息备份请求；所述备份单元，用于获得所述元数据服务器发送的多个元数据信息，以对所述元数据服务器中的元数据信息进行备份。可选的，还包括：更新请求单元和更新单元，所述更新请求单元，用于在所述备份单元对所述元数据服务器中的元数据信息进行备份后，按照预设的更新时间周期，向所述元数据服务器发送元数据信息更新请求；所述更新单元，用于获得所述元数据服务器发送的更新数据并更新所述客户端设备本地存储的元数据信息。可选的，所述分布式文件系统中包括有至少一个客户端设备组，每个所述客户端设备组中包括至少两个客户端设备，任一客户端设备中均备份有该客户端设备所在的客户端设备组中其他客户端设备存储的元数据信息。可选的，所述文件读取单元，包括：数量确定子单元、参数信息获得子单元、读取服务器选择子单元和文件读取子单元，所述数量确定子单元，用于确定根据所述元数据信息所确定的多个存储地址所在的存本文档来自技高网...

【技术保护点】
一种分布式文件系统的读方法，其特征在于，所述分布式文件系统至少包括：客户端设备、存储服务器和元数据服务器，所述客户端设备分别与元数据服务器、存储服务器通信连接，所述读方法应用于客户端设备，所述方法包括：获得针对所要读取的文件的读指令；根据所述读指令确定所要读取的文件的标识；从所述客户端设备本地获取与所述标识对应的元数据信息，根据所述元数据信息确定所述所要读取的文件在所述存储服务器中的存储地址，其中，所述客户端设备本地存储的元数据信息从所述元数据服务器获取得到或者从位于同一客户端设备组的其他客户端设备获取得到；从所述存储服务器中的所述存储地址中获取所述所要读取的文件。

【技术特征摘要】
1.一种分布式文件系统的读方法，其特征在于，所述分布式文件系统至
少包括：客户端设备、存储服务器和元数据服务器，所述客户端设备分别与元
数据服务器、存储服务器通信连接，所述读方法应用于客户端设备，所述方法
包括：
获得针对所要读取的文件的读指令；
根据所述读指令确定所要读取的文件的标识；
从所述客户端设备本地获取与所述标识对应的元数据信息，根据所述元数
据信息确定所述所要读取的文件在所述存储服务器中的存储地址，其中，所述
客户端设备本地存储的元数据信息从所述元数据服务器获取得到或者从位于
同一客户端设备组的其他客户端设备获取得到；
从所述存储服务器中的所述存储地址中获取所述所要读取的文件。
2.根据权利要求1所述的方法，其特征在于，还包括：
在所述客户端设备本地未存储有与所述标识对应的元数据信息时，向所述
元数据服务器发送元数据信息获取请求，所述请求中包含有所述标识；
获得所述元数据服务器返回的元数据信息并存储在所述客户端设备本地，
根据所述元数据服务器返回的元数据信息确定所述所要读取的文件在所述存
储服务器中的存储地址。
3.根据权利要求1或2所述的方法，其特征在于，所述元数据信息中包含
有：文件的标识及与文件的标识对应的存储地址。
4.根据权利要求1或2所述的方法，其特征在于，在获得针对所要读取的
文件的读指令前，所述方法还包括：
向所述元数据服务器发送元数据信息备份请求；
获得所述元数据服务器发送的多个元数据信息，以对所述元数据服务器中
的元数据信息进行备份。
5.根据权利要求4所述的方法，其特征在于，在对所述元数据服务器中的
元数据信息进行备份后，所述方法还包括：
按照预设的更新时间周期，向所述元数据服务器发送元数据信息更新请
求；
获得所述元数据服务器发送的更新数据并更新所述客户端设备本地存储
的元数据信息。
6.根据权利要求1所述的方法，其特征在于，所述文件的标识包括：文件
编号和文件块号。
7.根据权利要求2所述的方法，其特征在于，所述分布式文件系统中包括
有至少一个客户端设备组，每个所述客户端设备组中包括至少两个客户端设
备，任一客户端设备中均备份有该客户端设备所在的客户端设备组中其他客户
端设备存储的元数据信息。
8.根据权利要求1所述的方法，其特征在于，所述从所述存储服务器中的
所述存储地址中获取所述所要读取的文件，包括：
确定根据所述元数据信息所确定的多个存储地址所在的存储服务器的数
量；
在所述数量不小于两个时，获得所述多个存储地址所在的存储服务器的硬
件参数信息和/或运行参数信息；
根据所获得的存储服务器的参数信息从所述多个存储地址所在的存储服
务器中选择一个作为读取服务器；
从所述读取服务器对应的存储地址中获取所述所要读取的文件。
9.根据权利要求8所述的方法，其特征在于，所述运行参数信息至少包括
运行负载信息，所述硬件参数信息至少包括：存储服务器的可用空间信息。
10.一种分布式文件系统中的客户端设备，其特征在于，所述分布式文件
系统至少包括：客户端设备、存储服务器和元数据服务器，所述客户端设备分
别与元数据服务器、存储服务器通信连接，所述客户端设备包括：读指令获得
单元、标识确定单元、第一地址确定单元和文件读取单元；
所述读指令获得单元，用于获得针对所要读取的文件的读指令；
所述标识确定单元，用于根据所述读指令确定所要读取的文件的标识；
所述第一地址确定单元，用于从所述客户端设备本地获取与所述标识对应
的元数据信息，根据所...

【专利技术属性】
技术研发人员：张灿群，
申请(专利权)人：北京金山云网络技术有限公司，北京金山云科技有限公司，
类型：发明
国别省市：北京;11