数据治理方法、装置、计算机设备及存储介质制造方法及图纸

技术编号:37682321 阅读:15 留言:0更新日期:2023-05-28 09:35
本申请实施例公开了一种数据治理方法、装置、计算机设备及存储介质。所述方法应用于数据治理系统,所述方法包括:获取数据源类型信息以及多个数据项配置信息;从预设的多种数据源类型分别对应的调用实例中确定与所述数据源类型信息对应的目标调用实例,并根据多个所述数据项配置信息确定目标会话域实例以及数据返回实例;根据所述目标调用实例、所述目标会话域实例以及所述数据返回实例获取目标数据。一方面,本申请实施例由于预设有多种数据源类型分别对应的调用实例,相同的数据源类型可以调用同一个调用实例,避免调用实例的重复编码;另一方面,当需要接入新的数据源时,只需要进行数据源类型以及数据项配置信息的配置即可,数据治理效率高。数据治理效率高。数据治理效率高。

【技术实现步骤摘要】
数据治理方法、装置、计算机设备及存储介质


[0001]本申请涉及数据处理
,尤其涉及一种数据治理方法、装置、计算机设备及存储介质。

技术介绍

[0002]企业在软件开发中,通常需要进行数据集成管理。而数据来源各式各样,比如超文本传输协议(HTTP,HyperText Transfer Protocol)请求响应、关系型数据库管理系统(MySQL)数据库、逗号/字符分隔值(Comma

Separated Values,CSV),我们需要在代码层面为不同的数据源适配不同的数据编写代码。
[0003]使用传统方案进行数据集成管理,需要对接每个数据接口,且每对接每个数据接口都要重复编码,整个流程繁琐复杂,而且每次遇到新的数据源需要接入,都要进行编码、代码打包、服务部署等一系列的手动操作,新增的数据才算接入成功。
[0004]当需要频繁的接入数据时,传统方案人力成本巨大,且无法进行维护,无法做到热更新,导致数据治理的效率非常低。

技术实现思路

[0005]本申请实施例提供了一种数据治理方法、装置、计算机设备及存储介质,可以提高数据治理的效率。
[0006]第一方面,本申请实施例提供了一种数据治理方法,所述方法应用于数据治理系统,所述方法包括:
[0007]获取数据源类型信息以及多个数据项配置信息;
[0008]从预设的多种数据源类型分别对应的调用实例中确定与所述数据源类型信息对应的目标调用实例,并根据多个所述数据项配置信息确定目标会话域实例以及数据返回实例;
[0009]根据所述目标调用实例、所述目标会话域实例以及所述数据返回实例获取目标数据。
[0010]第二方面,本申请实施例还提供了一种数据治理装置,所述数据集成管理装置被配置于数据治理系统,所述装置包括:
[0011]收发单元,用于获取数据源类型信息以及多个数据项配置信息;
[0012]处理单元,用于从预设的多种数据源类型分别对应的调用实例中确定与所述数据源类型信息对应的目标调用实例,并根据多个所述数据项配置信息确定目标会话域实例以及数据返回实例;根据所述目标调用实例、所述目标会话域实例以及所述数据返回实例获取目标数据。
[0013]第三方面,本申请实施例还提供了一种计算机设备,其包括存储器及处理器,所述存储器上存储有计算机程序,所述处理器执行所述计算机程序时实现上述方法。
[0014]第四方面,本申请实施例还提供了一种计算机可读存储介质,所述存储介质存储
有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时可实现上述方法。
[0015]本申请实施例提供了一种数据治理方法、装置、计算机设备及存储介质。其中,所述方法应用于数据治理系统,所述方法包括:获取数据源类型信息以及多个数据项配置信息;从预设的多种数据源类型分别对应的调用实例中确定与所述数据源类型信息对应的目标调用实例,并根据多个所述数据项配置信息确定目标会话域实例以及数据返回实例;根据所述目标调用实例、所述目标会话域实例以及所述数据返回实例获取目标数据。一方面,本申请实施例由于预设有多种数据源类型分别对应的调用实例,相同的数据源类型可以调用同一个调用实例,避免调用实例的重复编码;另一方面,当需要接入新的数据源时,只需要进行数据源类型以及数据项配置信息的配置即可,数据治理效率高。
附图说明
[0016]为了更清楚地说明本申请实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0017]图1为本申请实施例提供的数据治理方法的流程示意图;
[0018]图2为本申请实施例提供的数据源配置页面的一个界面示意图;
[0019]图3为本申请另一实施例提供的数据治理方法的流程示意图;
[0020]图4为本申请实施例提供的数据治理方法的一个具体数据执行流程示意图;
[0021]图5为本申请实施例提供的数据治理方法的一个架构设计图;
[0022]图6为本申请实施例提供的数据治理装置的示意性框图;
[0023]图7为本申请实施例提供的计算机设备的示意性框图。
具体实施方式
[0024]下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
[0025]应当理解,当在本说明书和所附权利要求书中使用时,术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
[0026]还应当理解,在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。
[0027]还应当进一步理解,在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
[0028]本申请实施例提供了一种数据治理方法、装置、计算机设备及存储介质。
[0029]该数据治理方法的执行主体可以是本申请实施例提供的数据治理装置,或者集成了该数据治理装置的计算机设备,其中,该数据治理装置可以采用硬件或者软件的方式实
现,该计算机设备可以为终端或服务器。
[0030]具体地,该计算机设备种安装有数据治理系统,该数据集成管理装置被配置于所述数据治理系统。
[0031]图1是本申请实施例提供的数据治理方法的流程示意图。如图1所示,该方法包括以下步骤S110

S130。
[0032]S110、获取数据源类型信息以及多个数据项配置信息。
[0033]具体地,在一些实施例中,步骤S110包括:展示数据源配置页面;基于所述数据源配置页面获取所述数据源类型信息以及多个所述数据项配置信息。
[0034]进一步地,本实施例中的数据治理系统包括业务系统、配置域以及数据引擎执行域,当需要新增数据时,通过用户侧的业务系统展示数据源配置页面,该数据源配置页面,其中,在一些实施例中,MySQL的数据源配置页面如图2所示。
[0035]其中,本实施例中,用户可以在数据源配置页面中输入多个数据项配置信息,也可以在数据源配置页面输入数据组配置信息(此时,数据源配置页面中显示有多个数据组配置信息,然后用户通过点击选择所需的数据组配置信息),其中,数据组配置信息由多个数据项配置信息组成,此时,步骤S110包括:基于所述数本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据治理方法,其特征在于,所述方法应用于数据治理系统,所述方法包括:获取数据源类型信息以及多个数据项配置信息;从预设的多种数据源类型分别对应的调用实例中确定与所述数据源类型信息对应的目标调用实例,并根据多个所述数据项配置信息确定目标会话域实例以及数据返回实例;根据所述目标调用实例、所述目标会话域实例以及所述数据返回实例获取目标数据。2.根据权利要求1所述的方法,其特征在于,所述获取数据源类型信息以及多个数据项配置信息,包括:展示数据源配置页面;基于所述数据源配置页面获取所述数据源类型信息以及数据组配置信息;根据所述数据组配置信息获取多个所述数据项配置信息。3.根据权利要求1所述的方法,所述数据项配置信息包括访问配置信息以及返回值配置信息;所述根据多个所述数据项配置信息确定目标会话域实例以及数据返回实例,包括:根据预设的访问配置信息与访问配置实例的映射关系,将所述访问配置信息映射组装至对应的访问配置实例中,得到所述目标会话域实例;将所述返回值配置信息映射组装至预设的返回值配置实例中,得到所述数据返回实例。4.根据权利要求1至3中任一项所述的方法,其特征在于,所述根据所述目标调用实例、所述目标会话域实例以及所述数据返回实例获取目标数据之前,所述方法还包括:获取插件配置指令,所述插件配置指令包括前置插件配置指令以及后置插件配置指令中的至少一种;根据所述插件配置指令从预设的多个插件中确定至少一个目标插件,所述目标插件包括前置插件以及后置插件中的至少一种,所述前置插件根据所述前置插件配置指令得到,所述后置插件根据所述后置插件配置指令得到;所述根据所述目标调用实例、所述目标会话域实例以及所述数据返回实例获取目标数据,包括:根据所述目标调用实例、所述目标会话域实例、所述数据返回实例以及所述目标插件获取所述目标数据。5.根据权利要求4所述的方法,其特征在于,所述前置插件...

【专利技术属性】
技术研发人员:张剑焜江俊卿李健青
申请(专利权)人:深圳前海环融联易信息科技服务有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1