分布式文件系统的访问方法和系统技术方案

本发明专利技术提供了一种分布式文件系统的访问方法和系统，其中，所述分布式文件系统的访问方法包括：接收对分布式文件系统的操作请求；根据所述操作请求建立与所述分布式文件系统之间的连接；调用第二数据访问方法在所述分布式文件系统中响应所述操作请求，所述第二数据访问方法为重新封装了处理逻辑的第一数据访问方法，所述第一数据访问方法是指数据传输的通信协议包含的数据访问方法；返回响应所述操作请求得到的结果。上述分布式文件系统的访问方法和系统节省了应用系统开发所需的时间和资金。

【技术实现步骤摘要】

本专利技术涉及分布式数据处理技术，特别是涉及一种分布式文件系统的访问方法和系统。
技术介绍
随着互联网技术的飞速发展，用户的数据量也出现成倍地增长。这对企业的网络系统提出了更大的容量存储能力和更高的系统性能要求。NAS (Network Attached Storage,网络附加存储)作为一种专用的文件系统，具有易部署、易维护的特点，是中小企业发展初期主要的存储备份设备，但是NAS也存在一些缺点:一是任何时刻只有一个节点处于活动状态，容易出现负荷热点。二是扩展性差，系统性能和空间不能随需求动态变化。随着数据量的增长原有应用系统的NAS文件系统将不能满足企业需求。分布式文件系统是一种高性能、高可扩展的文件系统，它采用scale-out (水平扩展)架构设计，通过增加普通服务器的方式，在不停机的情况下动态扩展其运算、存储和1/0带宽的规模，并利用集群技术将I/O负载分配到多个数据节点上处理，提高系统的整体性倉泛。企业若要在原有的应用系统上使用分布式文件系统代替原有的NAS，传统的方法，需要对企业的应用系统重新开发或重构，增加了应用系统开发的工作量。
技术实现思路
基于此，有必要针对上述技术问题，提供一种不需要对应用系统重新开发的分布式文件系统的访问方法和系统。—种分布式文件系统的访问方法，所述方法包括:接收对分布式文件系统的操作请求；根据所述操作请求建立与所述分布式文件系统之间的连接；调用第二数据访问方法在所述分布式文件系统中响应所述操作请求，所述第二数据访问方法为重新封装了处理逻辑的第一数据访问方法，所述第一数据访问方法是指数据传输的通信协议包含的数据访问方法； 返回响应所述操作请求得到的结果。在其中一个实施例中，所述第二数据访问方法包括:文件读取方法、文件上传方法、文件复制方法、文件删除方法、文件重命名方法、创建目录方法和查找当前目录文件列表方法中的至少一种第二数据访问方法。在其中一个实施例中，所述根据所述操作请求建立与所述分布式文件系统之间的连接的步骤，包括:加载分布式文件系统的配置信息，所述配置信息包括访问地址和访问端口 ；根据所述操作请求创建系统连接器对象，通过所述系统连接器对象根据所述访问地址和访问端口建立与分布式文件系统之间的连接。在其中一个实施例中，所述调用第二数据访问方法在所述分布式文件系统中响应所述操作请求的步骤，包括:检查所述第二数据访问方法对分布式文件系统是否有操作权限；当有操作权限时，判断所述操作请求是否是修改所述分布式文件系统中数据的操作请求，若是，进一步判断所述分布式文件系统中数据是否已被占用；当所述分布式文件系统的数据没有被占用时，则修改所述分布式文件系统中数据，否则等待所述占有被释放。在其中一个实施例中，所述分布式文件系统包括控制节点和数据节点；所述方法还包括:所述控制节点接收所述操作请求，将所述操作请求记录在日志文件中，并定期合并所述日志文件；和/或所述控制节点接收数据节点发送的心跳，若在预设时间内未接收到所述数据节点发送的心跳，则将所述数据节点标记为失效数据节点；所述控制节点优先选择未被标记为失效数据节点的数据节点对所述操作请求进行响应。一种分布式文件系统的访问系统，其特征在于所述系统包括:操作请求接收模块，用于接收对分布式文件系统的操作请求；连接建立模块，用于根据所述操作请求建立与所述分布式文件系统之间的连接；操作请求响应模块，用于调用第二数据访问方法在所述分布式文件系统中响应所述操作请求，所述第二数据访问方法为重新封装了处理逻辑的第一数据访问方法，所述第一数据访问方法是指数据传输的通信协议包含的数据访问方法；结果返回模块，返回响应所述操作请求得到的结果。在其中一个实施例中，所述第二数据访问方法包括:文件读取系统、文件上传系统、文件复制系统、文件删除系统、文件重命名系统、创建目录系统和查找当前目录文件列表系统中的至少一种第二数据访问方法。在其中一个实施例中，所述连接建立模块包括:配置信息加载模块，用于加载分布式文件系统的配置信息，所述配置信息包括访问地址和访问端口；对象连接模块，用于根据所述操作请求创建系统连接器对象，通过所述系统连接器对象根据所述访问地址和访问端口建立与分布式文件系统之间的连接。在其中一个实施例中,所述操作请求响应模块包括:操作权限检查模块，用于检查所述第二数据访问方法对分布式文件系统是否有操作权限；操作请求判断模块，用于当有操作权限时，判断所述操作请求是否是修改所述分布式文件系统中数据的操作请求，若是，进一步判断所述分布式文件系统中数据是否已被占用；数据修改模块，用于当所述分布式文件系统中数据没有被占用时，则修改所述分布式文件系统中数据，否则等待所述占有被释放。在其中一个实施例中，所述分布式文件系统包括控制节点和数据节点；所述系统还包括:所述控制节点，用于接收所述操作请求，将所述操作请求记录在日志文件中，并定期合并所述日志文件；和/或所述控制节点，还用于接收数据节点发送的心跳，若在预设时间内未接收到所述数据节点发送的心跳，则将所述数据节点标记为失效数据节点；所述控制节点优先选择未被标记为失效数据节点的数据节点对所述操作请求进行响应。上述分布式文件系统的访问方法和系统，通过调用第二数据访问方法就能像访问本地文件系统一样访问分布式文件系统。应用系统只需要将原有的文件系统下的数据转移至分布式文件系统即可，应用系统本身不需要做任何改变，便可实现用分布式文件系统代替应用系统原有的文件系统。由于不需要对应用系统重新开发也可在应用系统上使用分布式文件系统，节省了应用系统开发所需的时间和资金。【附图说明】图1为一个实施例中分布式文件系统的访问方法的应用环境图；图2为一个实施例中分布式文件系统的访问方法的流程示意图；图3为一个实施例中访问HDFS的一个界面图；图4为一个实施例中调用通信协议中重新封装了处理逻辑的数据访问方法响应所述操作请求步骤的流程示意图；[0046当前第1页1 2 3 4 本文档来自技高网...

【技术保护点】
一种分布式文件系统的访问方法，所述方法包括：接收对分布式文件系统的操作请求；根据所述操作请求建立与所述分布式文件系统之间的连接；调用第二数据访问方法在所述分布式文件系统中响应所述操作请求，所述第二数据访问方法为重新封装了处理逻辑的第一数据访问方法，所述第一数据访问方法是指数据传输的通信协议包含的数据访问方法；返回响应所述操作请求得到的结果。

【技术特征摘要】

【专利技术属性】
技术研发人员：郑壮杰，
申请(专利权)人：博雅网络游戏开发深圳有限公司，
类型：发明
国别省市：广东;44