一种元数据存储方法及计算机可读存储介质技术

技术编号:20425142 阅读:27 留言:0更新日期:2019-02-23 08:29
本发明专利技术实施例提供了一种元数据存储方法,API Gateway接收一个或者多个文件系统客户端发送的元数据操作请求;所述API Gateway对接收到的元数据操作请求进行鉴权处理;所述API Gateway将鉴权通过的元数据操作请求分流给元数据服务端。基于上述方案,由于引入API Gateway,采用服务资源池,可以大大提升了元数据服务的资源利用率,并降低了高并发客户端对服务端的压力。同时,由于统一了入口,能够显著降低元数据服务复杂度及开发成本;同时,基于API Gateway的请求分流也实现了负载均衡控制。发明专利技术实施例还提供了一种计算机可读存储介质。

【技术实现步骤摘要】
一种元数据存储方法及计算机可读存储介质
本专利技术涉及数据处理
,具体涉及一种元数据存储方法及计算机可读存储介质。
技术介绍
文件系统是操作系统用于明确存储设备(常见的是磁盘,也有基于NANDFlash的固态硬盘)或分区上的文件的方法和数据结构,即在存储设备上组织文件的方法。通常,文件系统都需要存储文件元数据,其处理过程通常为文件系统客户端与元数据服务端直接交互,每个文件系统客户端都需要与元数据服务端创建独立的连接。但是,文件系统客户端并发请求数量往往比较大,因此,元数据服务端资源开销也比较大,一旦缺乏服务限流,容易导致服务资源过度使用;另一方面,文件系统客户端与元数据服务端的每个连接均需要鉴权,导致处理流程繁琐;除此之外,现有的元数据存储方式也无法实现负载均衡、蓝绿部署及灰度发布等。
技术实现思路
为了至少部分地解决现技术存在的问题,本专利技术实施例期望提供一种元数据存储方法及计算机可读存储介质。根据第一方面,一种实施例中提供了一种元数据存储方法,包括:APIGateway接收一个或者多个文件系统客户端发送的元数据操作请求;所述APIGateway对接收到的元数据操作请求进行鉴权处理;所述APIGateway将鉴权通过的元数据操作请求分流给元数据服务端。优选地,所述元数据操作请求包括以下请求中的至少其中之一:增加文件节点信息请求、删除文件节点信息请求、更新文件节点信息请求、获取文件节点信息请求、增加文件结构信息请求、删除文件结构信息请求、更新文件结构信息请求、获取文件结构信息请求、获取文件根id请求及获取文件节点id请求。优选地,所述APIGateway对接收到的元数据操作请求进行鉴权处理,包括:所述APIGateway比对接收到的元数据操作请求中的用户名和密码,如果用户名和密码均正确,则鉴权通过;否则,鉴权失败。优选地,所述APIGateway将鉴权通过的元数据操作请求分流给元数据服务端,包括:所述APIGateway确定出当前空闲的元数据服务端,并将当前空闲的元数据服务端按照预设顺序分配给鉴权通过的元数据操作请求;如果没有空闲的服务则等待,直至有可用的空闲的服务为止。优选地,当进行蓝绿部署时,所述APIGateway确定出当前空闲的元数据服务端,并将当前空闲的元数据服务端按照预设顺序分配给鉴权通过的元数据操作请求,包括:所述APIGateway从提供最新版本服务的元数据服务端中确定出当前空闲的元数据服务端,并将所确定出的当前空闲的元数据服务端按照预设顺序分配给鉴权通过的元数据操作请求。优选地,当进行灰度发布时,所述APIGateway确定出当前空闲的元数据服务端,并将当前空闲的元数据服务端按照预设顺序分配给鉴权通过的元数据操作请求,包括:所述APIGateway从提供最新版本服务的元数据服务端中确定出当前空闲的元数据服务端,并从鉴权通过的元数据操作请求中确定出预设主机名对应的文件系统客户端所发送的元数据操作请求;将所确定出的当前空闲的元数据服务端按照预设顺序分配给所确定出的预设主机名对应的文件系统客户端所发送的元数据操作请求。优选地,所述预设顺序是指多个元数据操作请求发送时间的先后顺序,或者,多个元数据操作请求的优先级从高至低的顺序。优选地,所述方法还包括:当没有空闲的服务时,所述APIGateway定期轮询元数据服务端的工作状态,或者,由元数据服务端在空闲时向所述APIGateway上报自身的空闲状态,从而使APIGateway确定出当前空闲的元数据服务端。优选地,所述方法还包括:所述APIGateway接收元数据服务端返回的处理结果,所述处理结果是元数据服务端对接收到的元数据操作请求进行处理后生成的处理结果;所述APIGateway将所述处理结果转发给相应的文件系统客户端。根据第二方面,一种实施例中提供了一种元数据存储方法,所述方法包括:文件系统客户端向APIGateway发送元数据操作请求;具体的,所述元数据操作请求包括以下请求中的至少其中之一:增加文件节点信息请求、删除文件节点信息请求、更新文件节点信息请求、获取文件节点信息请求、增加文件结构信息请求、删除文件结构信息请求、更新文件结构信息请求、获取文件结构信息请求、获取文件根id请求及获取文件节点id请求。所述文件系统客户端接收所述APIGateway返回的针对所述元数据操作请求的处理结果;其中,所述处理结果是相应元数据服务端对接收到的元数据操作请求进行处理后生成的处理结果。根据第三方面,一种实施例中提供了一种元数据存储方法,所述方法包括:元数据服务端接收APIGateway发送的元数据操作请求;所述元数据服务端对所述元数据操作请求进行处理,并生成处理结果;所述元数据服务端将所述处理结果返回给所述APIGateway。根据第四方面,一种实施例中提供了一种计算机可读存储介质,该计算机可读存储介质包括程序,所述程序用于被处理器执行以实现如上述第一至第三方面中任一方面所述的方法。与现有技术相比,本专利技术实施例至少具备以下优点:根据本专利技术实施例提供的元数据存储方法,包括:APIGateway接收一个或者多个文件系统客户端发送的元数据操作请求;所述APIGateway对接收到的元数据操作请求进行鉴权处理;所述APIGateway将鉴权通过的元数据操作请求分流给元数据服务端。基于上述方案,本专利技术至少具备以下优点:1、通过引入APIGateway,采用服务资源池,大大提升了元数据服务的资源利用率,并降低了高并发客户端对服务端的压力。2、由于统一了入口,因此降低了元数据服务复杂度及开发成本;3、基于APIGateway的请求分流能够实现负载均衡控制;4、由于降低了文件系统客户端与元数据服务端的耦合度,因此,可以非常简单、方便地完成蓝绿部署和灰度发布。附图说明图1是本专利技术元数据存储方法在一种实施方式中的流程图;图2是本专利技术元数据存储方法所应用的元数据存储系统的基本结构图;图3是本专利技术元数据存储方法在第二种实施方式中的流程图;图4是本专利技术元数据存储方法在第三种实施方式中的流程图;图5是本专利技术元数据存储方法在第四种实施方式中的流程图。具体实施方式下面通过具体实施方式结合附图对本专利技术作进一步详细说明。其中不同实施方式中类似元件采用了相关联的类似的元件标号。在以下的实施方式中,很多细节描述是为了使得本申请能被更好的理解。然而,本领域技术人员可以毫不费力地认识到,其中部分特征在不同情况下是可以省略的,或者可以由其他元件、材料、方法所替代。在某些情况下,本申请相关的一些操作并没有在说明书中显示或者描述,这是为了避免本申请的核心部分被过多的描述所淹没,而对于本领域技术人员而言,详细描述这些相关操作并不是必要的,他们根据说明书中的描述以及本领域的一般技术知识即可完整了解相关操作。另外,说明书中所描述的特点、操作或者特征可以以任意适当的方式结合形成各种实施方式。同时,方法描述中的各步骤或者动作也可以按照本领域技术人员所能显而易见的方式进行顺序调换或调整。因此,说明书和附图中的各种顺序只是为了清楚描述某一个实施例,并不意味着是必须的顺序,除非另有说明其中某个顺序是必须遵循的。本文中为部件所编序号本身,例如“第一”、“第二”等,仅用于区分所描述的对象,不具有任何顺序或技本文档来自技高网...

【技术保护点】
1.一种元数据存储方法,其特征在于,所述方法包括:API Gateway接收一个或者多个文件系统客户端发送的元数据操作请求;所述API Gateway对接收到的元数据操作请求进行鉴权处理;所述API Gateway将鉴权通过的元数据操作请求分流给元数据服务端。

【技术特征摘要】
1.一种元数据存储方法,其特征在于,所述方法包括:APIGateway接收一个或者多个文件系统客户端发送的元数据操作请求;所述APIGateway对接收到的元数据操作请求进行鉴权处理;所述APIGateway将鉴权通过的元数据操作请求分流给元数据服务端。2.根据权利要求1所述的方法,其特征在于,所述元数据操作请求包括以下请求中的至少其中之一:增加文件节点信息请求、删除文件节点信息请求、更新文件节点信息请求、获取文件节点信息请求、增加文件结构信息请求、删除文件结构信息请求、更新文件结构信息请求、获取文件结构信息请求、获取文件根id请求及获取文件节点id请求。3.根据权利要求1所述的方法,其特征在于,所述APIGateway对接收到的元数据操作请求进行鉴权处理,包括:所述APIGateway比对接收到的元数据操作请求中的用户名和密码,如果用户名和密码均正确,则鉴权通过;否则,鉴权失败。4.根据权利要求1所述的方法,其特征在于,所述APIGateway将鉴权通过的元数据操作请求分流给元数据服务端,包括:所述APIGateway确定出当前空闲的元数据服务端,并将当前空闲的元数据服务端按照预设顺序分配给鉴权通过的元数据操作请求;如果没有空闲的服务则等待,直至有可用的空闲的服务为止。5.根据权利要求4所述的方法,其特征在于,当进行蓝绿部署时,所述APIGateway确定出当前空闲的元数据服务端,并将当前空闲的元数据服务端按照预设顺序分配给鉴权通过的元数据操作请求,包括:所述APIGateway从提供最新版本服务的元数据服务端中确定出当前空闲的元数据服务端,并将所确定出的当前空闲的元数据服务端按照预设顺序分配给鉴权通过的元数据操作请求。6.根据权利要求4所述的方法,其特征在于,当进行灰度发布时,所述APIGateway确定出当前空闲的元数据服务端,并将当前空闲的元数据服务端按照预设顺序分配给鉴权通过的元数据操作请求...

【专利技术属性】
技术研发人员:刘明华朱键郝斌
申请(专利权)人:香港中文大学深圳
类型:发明
国别省市:广东,44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1