一种数据治理的方法、装置、设备及存储介质制造方法及图纸

本申请适用于数据处理技术领域，提供了一种数据治理的方法、装置、设备及存储介质。该方法包括：将获取的待治理数据划分为多个数据块；根据预设的数据治理要求对每个数据块进行监控，得到每个数据块对应的监控结果；根据每个数据块对应的监控结果，确定多个数据块中的异常数据块；确定异常数据块对应的数据治理策略，并根据数据治理策略对异常数据块进行治理，得到治理结果，数据治理策略包括治理方案、治理时长以及治理人；根据治理结果管理企业数据。上述方案中，明确了异常数据块对应的责任人，给出了明确的治理方案，限定了治理时长，确保异常数据块得到真正的治理，提高了数据治理的效果，使数据治理真正的形成了一个闭环。使数据治理真正的形成了一个闭环。使数据治理真正的形成了一个闭环。

【技术实现步骤摘要】
一种数据治理的方法、装置、设备及存储介质


[0001]本申请属于数据处理
，尤其涉及一种数据治理的方法、装置、设备及存储介质。

技术介绍

[0002]数据治理(Data Governance)是组织中涉及数据使用的一整套管理行为。由企业数据治理部门发起并推行，关于如何制定和实施针对整个企业内部数据的商业应用和技术管理的一系列政策和流程。数据治理的最终目标是提升数据的价值，数据治理非常必要，是企业实现数字战略的基础，它是一个管理体系，包括组织、制度、流程、工具。
[0003]近年来，数据治理已经成了一个老生常谈的话题，如何做数据治理，业界从模型搭建、数据地图、数据质量、资产价值等层面都有或深或浅的研究。但传统的数据治理方法中，大多数都只关注如何制定数据治理的规则和标准，数据治理过程并不完善，到目前为止还未形成一个闭环的趋于稳定的数据治理系统，导致数据治理效果差。

技术实现思路

[0004]有鉴于此，本申请实施例提供了一种数据治理的方法、装置、设备及存储介质以解决传统的数据治理方法中，大多数都只关注如何制定数据治理的规则和标准，数据治理过程并不完善，到目前为止还未形成一个闭环的趋于稳定的数据治理系统，导致数据治理效果差的问题。
[0005]本申请实施例的第一方面提供了一种数据治理的方法，该方法包括：
[0006]将获取的待治理数据划分为多个数据块，所述待治理数据包括企业数据；
[0007]根据预设的数据治理要求对每个所述数据块进行监控，得到每个所述数据块对应的监控结果；
[0008]根据每个所述数据块对应的监控结果，确定所述多个数据块中的异常数据块；
[0009]确定所述异常数据块对应的数据治理策略，并根据所述数据治理策略对所述异常数据块进行治理，得到治理结果，所述数据治理策略包括治理方案、治理时长以及治理人；
[0010]根据所述治理结果管理所述企业数据。
[0011]可选地，所述确定所述异常数据块对应的数据治理策略，并根据所述数据治理策略对所述异常数据块进行治理，得到治理结果之后，所述方法还包括：
[0012]获取所述异常数据块对应的数据治理要求；
[0013]根据所述异常数据块对应的数据治理要求，对治理后的异常数据块进行再次监控，得到再次监控结果。
[0014]可选地，所述根据所述异常数据块对应的数据治理要求，对治理后的异常数据块进行再次监控，得到再次监控结果之后，所述方法还包括：
[0015]根据所述异常数据块对应的数据治理要求，对所述再次监控结果进行评价，生成评价结果；
[0016]当检测到所述评价结果合格时，将所述治理结果发送至用户端；或
[0017]当检测到所述评价结果不合格时，基于所述数据治理策略对所述异常数据块进行再次治理。
[0018]可选地，所述根据预设的数据治理要求对每个所述数据块进行监控，得到每个所述数据块对应的监控结果，包括：
[0019]针对每个所述数据块，判断所述数据块中的数据存储期限是否超过第一预设时长，当所述数据块中的数据存储期限超过第一预设时长时，确定所述数据块的监控结果为所述数据块中存在异常数据；
[0020]或，判断所述数据块中的数据存储形式是否符合存储规范，当所述数据块中的数据存储形式不符合存储规范时，确定所述数据块的监控结果为所述数据块中存在异常数据；
[0021]或，判断所述数据块中的数据是否在第二预设时长内未被访问，当所述数据块中的数据在第二预设时长内未被访问时，确定所述数据块的监控结果为所述数据块中存在异常数据。
[0022]可选地，所述根据每个数据块对应的监控结果，确定所述多个数据块中的异常数据块，包括：
[0023]针对每个所述数据块，当所述数据块对应的监控结果中存在所述异常数据时，判定具有所述异常数据的数据块为所述异常数据块。
[0024]可选地，所述方法还包括：记录对所述异常数据块进行治理的过程，生成数据治理日志。
[0025]可选地，所述根据每个数据块对应的监控结果，确定所述多个数据块中的异常数据块之后，所述方法还包括：
[0026]若检测到所述异常数据块在预设的白名单中，则不对所述异常数据块进行治理。
[0027]本申请实施例的第二方面提供了一种数据治理的装置，包括：
[0028]划分单元，用于将获取的待治理数据划分为多个数据块，所述待治理数据包括企业数据；
[0029]监控单元，用于根据预设的数据治理要求对每个所述数据块进行监控，得到每个所述数据块对应的监控结果；
[0030]第一确定单元，用于根据每个所述数据块对应的监控结果，确定所述多个数据块中的异常数据块；
[0031]第二确定单元，用于确定所述异常数据块对应的数据治理策略，并根据所述数据治理策略对所述异常数据块进行治理，得到治理结果，所述数据治理策略包括治理方案、治理时长以及治理人；
[0032]管理单元，用于根据所述治理结果管理所述企业数据。
[0033]本申请实施例的第三方面提供了一种数据治理的设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如上述第一方面所述的数据治理的方法的步骤。
[0034]本申请实施例的第四方面提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如上述第一方面所述的数据
治理的方法的步骤。
[0035]本申请实施例的第五方面提供了一种计算机程序产品，当计算机程序产品在数据治理的设备上运行时，使得该设备执行上述第一方面所述的数据治理的方法的步骤。
[0036]本申请实施例提供的一种数据治理的方法、装置、设备及存储介质，具有以下有益效果：
[0037]将获取的待治理数据划分为多个数据块，待治理数据包括企业数据；根据预设的数据治理要求对每个数据块进行监控，得到每个数据块对应的监控结果；根据每个数据块对应的监控结果，确定多个数据块中的异常数据块；确定异常数据块对应的数据治理策略，并根据数据治理策略对异常数据块进行治理，得到治理结果，数据治理策略包括治理方案、治理时长以及治理人；根据治理结果管理企业数据。上述方案中，根据预设的数据治理要求对每个数据块进行监控，当监控到某个数据块异常时，根据不同的数据治理策略对异常数据块进行数据治理。数据治理策略中包括了异常数据块对应的治理方案、治理时长以及治理人，即明确了异常数据块对应的责任人，给出了明确的治理方案，限定了治理时长，使对应的治理人根据该治理方案在合理的时间内对异常数据块进行合理、有效地治理。确保异常数据块得到真正的治理，提高了数据治理的效果，实现了数据价值和数据质量的提升，使数据治理真正的形成了一个闭环。
附图说明
[0038]为了更清楚地说明本申请实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据治理的方法，其特征在于，包括：将获取的待治理数据划分为多个数据块，所述待治理数据包括企业数据；根据预设的数据治理要求对每个所述数据块进行监控，得到每个所述数据块对应的监控结果；根据每个所述数据块对应的监控结果，确定所述多个数据块中的异常数据块；确定所述异常数据块对应的数据治理策略，并根据所述数据治理策略对所述异常数据块进行治理，得到治理结果，所述数据治理策略包括治理方案、治理时长以及治理人；根据所述治理结果管理所述企业数据。2.如权利要求1所述的方法，其特征在于，所述确定所述异常数据块对应的数据治理策略，并根据所述数据治理策略对所述异常数据块进行治理，得到治理结果之后，所述方法还包括：获取所述异常数据块对应的数据治理要求；根据所述异常数据块对应的数据治理要求，对治理后的异常数据块进行再次监控，得到再次监控结果。3.如权利要求2所述的方法，其特征在于，所述根据所述异常数据块对应的数据治理要求，对治理后的异常数据块进行再次监控，得到再次监控结果之后，所述方法还包括：根据所述异常数据块对应的数据治理要求，对所述再次监控结果进行评价，生成评价结果；当检测到所述评价结果合格时，将所述治理结果发送至用户端；或当检测到所述评价结果不合格时，基于所述数据治理策略对所述异常数据块进行再次治理。4.如权利要求1所述的方法，其特征在于，所述根据预设的数据治理要求对每个所述数据块进行监控，得到每个所述数据块对应的监控结果，包括：针对每个所述数据块，判断所述数据块中的数据存储期限是否超过第一预设时长，当所述数据块中的数据存储期限超过第一预设时长时，确定所述数据块的监控结果为所述数据块中存在异常数据；或，判断所述数据块中的数据存储形式是否符合存储规范，当所述数据块中的数据存储形式不符合存储规范时，确定所述数据块的监控结果为所述数据块中存在异常数据；或，判断...

【专利技术属性】
技术研发人员：陈硕，向明，李洋，胡明荣，
申请(专利权)人：平安付科技服务有限公司，
类型：发明
国别省市：