System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本申请涉及数据处理,尤其涉及一种湖仓元数据标签创建方法、湖仓元数据标签查询方法、系统、装置、设备、介质。
技术介绍
1、对于一些大数据应用场景来说,这些场景可能会存在以下需求:针对湖仓元数据打标签(比如,某个用户针对某个元数据具有访问权限等),以使该标签能够描述出该元数据所具有的特点。
2、然而,如何满足上述需求是一项亟待解决的技术问题。
技术实现思路
1、为了解决上述技术问题,本申请提供了一种湖仓元数据标签创建方法、湖仓元数据标签查询方法、系统、装置、设备、介质。
2、为了实现上述目的,本申请提供的技术方案如下:
3、本申请提供一种湖仓元数据标签创建方法,所述方法应用于元数据标签服务系统,所述方法包括:
4、接收由元数据服务网关发送的元数据标签创建请求;所述元数据标签创建请求是由所述元数据服务网关依据数据引擎提供的元数据标签创建参数所确定的;所述元数据标签创建参数包括第一标签名称、第一标签值以及第一标签作用对象描述信息;
5、依据所述元数据标签创建请求携带的元数据标签创建参数,执行标签创建逻辑。
6、在一种可能的实施方式下,所述标签创建逻辑包括:
7、向标签名记录表中写入所述第一标签名称对应的标签名记录内容,所述标签名记录内容包括所述第一标签名称对应的标签名标识;
8、向标签作用对象记录表中写入所述第一标签作用对象描述信息对应的标签作用对象记录内容,所述标签作用对象记录内容包括所述第一
9、向标签值记录表中写入所述第一标签值对应的标签值记录内容,所述标签值记录内容是依据所述第一标签值、所述标签名标识以及所述标签作用对象标识所确定的。
10、在一种可能的实施方式下,所述元数据标签创建参数还包括第一标签集合名称;
11、所述向标签名记录表中写入所述第一标签名称对应的标签名记录内容之前,所述标签创建逻辑还包括:
12、向标签集合记录表中写入所述第一标签集合名称对应的标签集合记录内容,所述标签集合记录内容包括所述第一标签集合名称对应的集合标识;
13、依据所述集合标识和所述第一标签名称,确定所述第一标签名称对应的标签名记录内容。
14、在一种可能的实施方式下,所述向标签作用对象记录表中写入所述第一标签作用对象描述信息对应的标签作用对象记录内容,包括:
15、若所述标签作用对象记录表中不存在与所述第一标签作用对象描述信息相对应的标签作用对象记录内容,则向标签作用对象记录表中写入所述第一标签作用对象描述信息对应的标签作用对象记录内容。
16、在一种可能的实施方式下,所述方法还包括:
17、若检测到所述标签创建逻辑执行完成,则生成所述元数据标签创建请求对应的反馈信息;
18、将所述反馈信息发送给所述元数据服务网关,所述元数据服务网关用于将所述反馈信息转发给所述数据引擎。
19、在一种可能的实施方式下,所述元数据标签创建参数包括第一标签集合名称、第一标签名称、第一标签值以及第一标签作用对象描述信息;
20、所述生成所述元数据标签创建请求对应的反馈信息,包括:
21、将所述第一标签值、所述第一标签集合名称对应的集合标识、所述第一标签名称对应的标签名标识、以及所述第一标签作用对象描述信息对应的标签作用对象标识进行组合,得到所述反馈信息。
22、在一种可能的实施方式下,所述元数据标签创建请求用于请求创建一个元数据或者多个元数据对应的标签;
23、所述一个元数据或者多个元数据是由元数据存储系统进行管理的;
24、所述元数据服务网关用于将所述数据引擎发送的元数据处理请求路由给所述元数据存储系统,所述元数据存储系统用于执行所述元数据处理请求对应的数据处理逻辑。
25、本申请提供了一种湖仓元数据标签查询方法,所述方法应用于元数据标签服务系统,所述元数据标签服务系统用于针对利用本申请提供的湖仓元数据标签创建方法所创建的标签进行查询处理;
26、所述查询方法包括:
27、接收由元数据服务网关发送的元数据标签查询请求;所述元数据标签查询请求是由所述元数据服务网关依据数据引擎提供的元数据标签查询参数所确定的;
28、依据所述元数据标签查询请求携带的元数据标签查询参数进行标签查询处理,得到所述元数据标签查询请求对应的标签查询结果;
29、将所述标签查询结果发送给所述元数据服务网关,所述元数据服务网关用于将所述标签查询结果反馈给所述数据引擎。
30、在一种可能的实施方式下,所述元数据标签查询参数包括第二标签名称和第二标签作用对象描述信息;
31、所述标签查询结果的确定过程,包括:
32、从标签名记录表中查找所述第二标签名称对应的标签名标识;
33、从标签作用对象记录表中查找所述第二标签作用对象描述信息对应的标签作用对象标识;
34、依据所述标签名标识和所述标签作用对象标识查询标签值记录表,得到第二标签值;
35、依据所述第二标签值,确定所述标签查询结果。
36、在一种可能的实施方式下,所述元数据标签创建参数还包括第二标签集合名称;
37、所述从标签名记录表中查找所述第二标签名称对应的标签名标识之前,所述标签查询结果的确定过程,还包括:
38、从标签集合记录表中查找所述第二标签集合名称对应的集合标识;
39、所述从标签名记录表中查找所述第二标签名称对应的标签名标识,包括:
40、依据所述集合标识和所述第二标签名称查询所述标签名记录表,得到所述第二标签名称对应的标签名标识。
41、在一种可能的实施方式下,所述依据所述第二标签值,确定所述标签查询结果,包括:
42、将所述集合标识、所述标签名标识、所述标签作用对象标识以及所述第二标签值进行组合,得到所述标签查询结果。
43、本申请提供了一种湖仓元数据管理系统,所述湖仓元数据管理系统包括元数据服务网关、至少一个元数据存储系统以及元数据标签服务系统;
44、所述元数据服务网关用于将数据分析引擎发送的请求路由给所述元数据标签服务系统或者任一所述元数据存储系统;
45、所述元数据存储系统用于依据所述请求管理至少一个元数据;
46、所述元数据标签服务系统用于依据所述请求管理所述至少一个元数据中部分或者全部元数据对应的标签。
47、在一种可能的实施方式下,所述元数据标签服务系统用于执行本申请提供的湖仓元数据标签创建方法,或者,执行本申请提供的湖仓元数据标签创建方法。
48、本申请提供了一种湖仓元数据标签创建装置,包括:
49、第一接收单元,用于接收由元数据服务网关发送的元数据标签创建请求;所述元数本文档来自技高网...
【技术保护点】
1.一种湖仓元数据标签创建方法,其特征在于,所述方法应用于元数据标签服务系统,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述标签创建逻辑包括:
3.根据权利要求2所述的方法,其特征在于,所述元数据标签创建参数还包括第一标签集合名称;
4.根据权利要求2所述的方法,其特征在于,所述向标签作用对象记录表中写入所述第一标签作用对象描述信息对应的标签作用对象记录内容,包括:
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
6.根据权利要求5所述的方法,其特征在于,所述元数据标签创建参数包括第一标签集合名称、第一标签名称、第一标签值以及第一标签作用对象描述信息;
7.根据权利要求1-6任一项所述的方法,其特征在于,所述元数据标签创建请求用于请求创建一个元数据或者多个元数据对应的标签;
8.一种湖仓元数据标签查询方法,其特征在于,所述方法应用于元数据标签服务系统,所述元数据标签服务系统用于针对利用权利要求1-7任一项所述的湖仓元数据标签创建方法所创建的标签进行查询处理;
10.根据权利要求9所述的方法,其特征在于,所述元数据标签创建参数还包括第二标签集合名称;
11.根据权利要求10所述的方法,其特征在于,所述依据所述第二标签值,确定所述标签查询结果,包括:
12.一种湖仓元数据管理系统,其特征在于,所述湖仓元数据管理系统包括元数据服务网关、至少一个元数据存储系统以及元数据标签服务系统;
13.根据权利要求12所述的系统,其特征在于,所述元数据标签服务系统用于执行权利要求1-7任一项所述的湖仓元数据标签创建方法,或者,执行权利要求8-11任一项所述的湖仓元数据标签创建方法。
14.一种湖仓元数据标签创建装置,其特征在于,包括:
15.一种湖仓元数据标签查询装置,其特征在于,所述湖仓元数据标签查询装置用于针对利用权利要求1-7任一项所述的湖仓元数据标签创建方法所创建的标签进行查询处理;
16.一种电子设备,其特征在于,所述设备包括:处理器和存储器;
17.一种计算机可读介质,其特征在于,所述计算机可读介质中存储有指令或计算机程序,当所述指令或计算机程序在设备上运行时,使得所述设备执行权利要求1-11任一项所述的方法。
...【技术特征摘要】
1.一种湖仓元数据标签创建方法,其特征在于,所述方法应用于元数据标签服务系统,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述标签创建逻辑包括:
3.根据权利要求2所述的方法,其特征在于,所述元数据标签创建参数还包括第一标签集合名称;
4.根据权利要求2所述的方法,其特征在于,所述向标签作用对象记录表中写入所述第一标签作用对象描述信息对应的标签作用对象记录内容,包括:
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
6.根据权利要求5所述的方法,其特征在于,所述元数据标签创建参数包括第一标签集合名称、第一标签名称、第一标签值以及第一标签作用对象描述信息;
7.根据权利要求1-6任一项所述的方法,其特征在于,所述元数据标签创建请求用于请求创建一个元数据或者多个元数据对应的标签;
8.一种湖仓元数据标签查询方法,其特征在于,所述方法应用于元数据标签服务系统,所述元数据标签服务系统用于针对利用权利要求1-7任一项所述的湖仓元数据标签创建方法所创建的标签进行查询处理;
9.根据权利要求8所述的方法,其特征在于,所述元数据标签查询参数包括第二标签名称和第二...
【专利技术属性】
技术研发人员:李蒙军,郭俊,孙科,徐庆,
申请(专利权)人:北京火山引擎科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。