System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种树形元数据结构下对象语义的快速定位方法技术_技高网

一种树形元数据结构下对象语义的快速定位方法技术

技术编号:40947263 阅读:3 留言:0更新日期:2024-04-18 20:20
一种树形元数据结构下对象语义的快速定位方法、装置、设备及计算机可读存储介质,包括:写入对象的元数据信息时,首先根据写入所述对象的全路径,生成全路径哈希值,然后根据所述全路径哈希值,映射到所述全路径哈希值对应的MDS中,以及将对应所述元数据信息存储到所述MDS中;同时将所述对象写入所选择的MDS信息,记录至所述对象上一级目录对象的元数据中;访问所述对象时,基于所述全路径哈希值,定位对应的MDS中,解决了相关技术中现有分布式系统中,每一级目录会被分属不同的元数据节点,导致多级目录下,跳转比较多的技术问题。基于全路径哈希值的数据归属策略,大幅减少多级目录下寻址的交互次数,提升对象语义的性能。

【技术实现步骤摘要】

本申请涉及数据处理领域,具体涉及一种树形元数据结构下对象语义的快速定位方法、装置、设备及计算机可读存储介质。


技术介绍

1、目前对象系统下,元数据一般采用扁平结构结构。文件系统下,一般采用树形结构。对象文件合一的系统下,大部分采用文件的树形结构,统一管理元数据。

2、树形结构可以较好的支持文件的rename,目录树等语义。但是对于对象系统来讲,大幅增加了定位元数据信息的路径长度。特别是分布式系统中,每一级目录会被分属不同的元数据节点,导致多级目录下,跳转比较多。


技术实现思路

1、本申请提供一种树形元数据结构下对象语义的快速定位方法、装置、设备及计算机可读存储介质,可以解决现有分布式系统中,每一级目录会被分属不同的元数据节点,导致多级目录下,跳转比较多的技术问题。

2、第一方面,本申请实施例提供一种树形元数据结构下对象语义的快速定位方法,所述方法包括:

3、写入对象的元数据信息时,首先根据写入所述对象的全路径,生成全路径哈希值,然后根据所述全路径哈希值,映射到所述全路径哈希值对应的mds中,以及将对应所述元数据信息存储到所述mds中;

4、同时将所述对象写入所选择的mds信息,记录至所述对象上一级目录对象的元数据中;

5、访问所述对象时,基于所述全路径哈希值,定位对应的mds中。

6、结合第一方面,在一种实施方式中,所述访问所述对象之后,还包括:

7、访问所述对象,获取所述对象的全路径;

>8、确定所述对象的全路径哈希值是否失效;

9、若所述对象的全路径哈希值未失效,则基于所述全路径哈希值定位对应的mds中。

10、结合第一方面,在一种实施方式中,所述确定所述对象的全路径哈希值是否失效,包括:

11、获取预置失效路径表;

12、比对所述对象的全路径中的路径名称是否与所述预置失效路径表中的失效路径名称相同;

13、若所述对象的全路径中的路径名称未包含所述预置失效路径表中的任意一条失效路径名称,则确定所述对象的全路径未失效。

14、结合第一方面,在一种实施方式中,所述获取预置失效路径表之前,还包括:

15、若所述对象元数据信息中的路径名称发生改变时,则将所述对象发生改变的路径名称存储于预置失效路径表。

16、结合第一方面,在一种实施方式中,所述预置失效路径表包含至少一个失效路径名称。

17、第二方面,本申请实施例提供了一种树形元数据结构下对象语义的快速定位装置,所述树形元数据结构下对象语义的快速定位装置包括:

18、写入模块,用于写入对象的元数据信息时,首先根据写入所述对象的全路径,生成全路径哈希值,然后根据所述全路径哈希值,映射到所述全路径哈希值对应的mds中,以及将对应所述元数据信息存储到所述mds中;

19、记录模块,用于同时将所述对象写入所选择的mds信息,记录至所述对象上一级目录对象的元数据中;

20、第一定位模块,用于访问所述对象时,基于所述全路径哈希值,定位对应的mds中。

21、结合第二方面,在一种实施方式中,所述树形元数据结构下对象语义的快速定位装置还包括:

22、获取模块,用于访问所述对象,获取所述对象的全路径;

23、判断模块,用于确定所述对象的全路径哈希值是否失效;

24、第二定位模块,用于若所述对象的全路径哈希值未失效,则基于所述全路径哈希值定位对应的mds中。

25、结合第二方面,在一种实施方式中,所述判断模块包括:

26、获取预置失效路径表;

27、比对所述对象的全路径中的路径名称是否与所述预置失效路径表中的失效路径名称相同;

28、若所述对象的全路径中的路径名称未包含所述预置失效路径表中的任意一条失效路径名称,则确定所述对象的全路径未失效。

29、第三方面,本申请实施例提供了一种树形元数据结构下对象语义的快速定位设备,所述树形元数据结构下对象语义的快速定位设备包括处理器、存储器、以及存储在所述存储器上并可被所述处理器执行的树形元数据结构下对象语义的快速定位程序,其中所述树形元数据结构下对象语义的快速定位程序被所述处理器执行时,实现如上述的树形元数据结构下对象语义的快速定位方法的步骤。

30、第四方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有树形元数据结构下对象语义的快速定位程序,其中所述树形元数据结构下对象语义的快速定位程序被处理器执行时,实现如上述的树形元数据结构下对象语义的快速定位方法的步骤。

31、本申请实施例提供的技术方案带来的有益效果包括:

32、通过写入对象的元数据信息时,首先根据写入所述对象的全路径,生成全路径哈希值,然后根据所述全路径哈希值,映射到所述全路径哈希值对应的mds中,以及将对应所述元数据信息存储到所述mds中;同时将所述对象写入所选择的mds信息,记录至所述对象上一级目录对象的元数据中;访问所述对象时,基于所述全路径哈希值,定位对应的mds中,解决了相关技术中现有分布式系统中,每一级目录会被分属不同的元数据节点,导致多级目录下,跳转比较多的技术问题。基于全路径哈希值的数据归属策略,大幅减少多级目录下寻址的交互次数,提升对象语义的性能。

本文档来自技高网...

【技术保护点】

1.一种树形元数据结构下对象语义的快速定位方法,其特征在于,所述方法包括:

2.如权利要求1所述的树形元数据结构下对象语义的快速定位方法,其特征在于,所述访问所述对象之后,还包括:

3.如权利要求2所述的树形元数据结构下对象语义的快速定位方法,其特征在于,所述确定所述对象的全路径哈希值是否失效,包括:

4.如权利要求3所述的树形元数据结构下对象语义的快速定位方法,其特征在于,所述获取预置失效路径表之前,还包括:

5.如权利要求3所述的树形元数据结构下对象语义的快速定位方法,其特征在于,所述预置失效路径表包含至少一个失效路径名称。

6.一种树形元数据结构下对象语义的快速定位装置,其特征在于,所述树形元数据结构下对象语义的快速定位装置包括:

7.如权利要求6所述的树形元数据结构下对象语义的快速定位装置,其特征在于,所述树形元数据结构下对象语义的快速定位装置还包括:

8.如权利要求7所述的树形元数据结构下对象语义的快速定位装置,其特征在于,所述判断模块包括:

9.一种树形元数据结构下对象语义的快速定位设备,其特征在于,所述树形元数据结构下对象语义的快速定位设备包括处理器、存储器、以及存储在所述存储器上并可被所述处理器执行的树形元数据结构下对象语义的快速定位程序,其中所述树形元数据结构下对象语义的快速定位程序被所述处理器执行时,实现如权利要求1至5中任一项所述的树形元数据结构下对象语义的快速定位方法的步骤。

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有树形元数据结构下对象语义的快速定位程序,其中所述树形元数据结构下对象语义的快速定位程序被处理器执行时,实现如权利要求1至5中任一项所述的树形元数据结构下对象语义的快速定位方法的步骤。

...

【技术特征摘要】

1.一种树形元数据结构下对象语义的快速定位方法,其特征在于,所述方法包括:

2.如权利要求1所述的树形元数据结构下对象语义的快速定位方法,其特征在于,所述访问所述对象之后,还包括:

3.如权利要求2所述的树形元数据结构下对象语义的快速定位方法,其特征在于,所述确定所述对象的全路径哈希值是否失效,包括:

4.如权利要求3所述的树形元数据结构下对象语义的快速定位方法,其特征在于,所述获取预置失效路径表之前,还包括:

5.如权利要求3所述的树形元数据结构下对象语义的快速定位方法,其特征在于,所述预置失效路径表包含至少一个失效路径名称。

6.一种树形元数据结构下对象语义的快速定位装置,其特征在于,所述树形元数据结构下对象语义的快速定位装置包括:

7.如权利要求6所述的树形元数据结构下对象语义的快速定位装置,其特征在于,...

【专利技术属性】
技术研发人员:胡波
申请(专利权)人:中电云计算技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1