一种数据治理方法、装置、节点及存储介质制造方法及图纸

本发明专利技术实施例适用于计算机技术领域，提供了一种数据治理方法、装置、节点及存储介质，其中，数据治理方法应用于边缘计算网络中的边缘节点，数据治理方法包括：从边缘计算网络的中心节点获取边缘节点对应的数据治理任务；数据治理任务基于用户的配置指令生成；边缘计算网络包括多个边缘节点；基于数据治理任务对边缘节点获取到的物联网数据进行数据治理，得到数据治理结果；将数据治理结果发送给中心节点。将数据治理结果发送给中心节点。将数据治理结果发送给中心节点。

【技术实现步骤摘要】
一种数据治理方法、装置、节点及存储介质


[0001]本专利技术涉及计算机
，尤其涉及一种数据治理方法、装置、节点及存储介质。

技术介绍

[0002]目前，在工业场景的数据治理方案中，通常是将所有物联网(IOT，InternetofThings)设备产生的数据全部传到云端，在云端建立一个大数据平台，在大数据平台对IOT数据进行数据治理。由于需要将所有IOT数据发送到云端之后才进行数据治理，数据治理结果的实时性差。

技术实现思路

[0003]为了解决上述问题，本专利技术实施例提供了一种数据治理方法、装置、节点及存储介质，以至少解决相关技术中云端的数据治理结果的实时性差的问题。
[0004]本专利技术的技术方案是这样实现的：
[0005]一方面，本专利技术实施例提供了一种数据治理方法，应用于边缘计算网络中的边缘节点，该方法包括：
[0006]从所述边缘计算网络的中心节点获取所述边缘节点对应的数据治理任务；所述数据治理任务基于用户的配置指令生成；所述边缘计算网络包括多个边缘节点；
[0007]基于所述数据治理任务对所述边缘节点获取到的物联网数据进行数据治理，得到数据治理结果；
[0008]将所述数据治理结果发送给所述中心节点。
[0009]上述方案中，所述基于所述数据治理任务对所述边缘节点获取到的设备数据进行数据治理，得到数据治理结果，包括：
[0010]将获取到的物联网数据存储在所述边缘节点对应的时序数据库中；所述物联网数据包括时间戳；
[0011]基于所述数据治理任务，对所述边缘节点对应的时序数据库中的物联网数据进行数据治理，得到所述数据治理结果。
[0012]上述方案中，所述对所述边缘节点对应的时序数据库中的物联网数据进行数据治理，包括以下任意一项：
[0013]确定所述时序数据库中的物联网数据的均值；
[0014]确定所述时序数据库中的物联网数据的最大值；
[0015]确定所述时序数据库中的物联网数据的最小值。
[0016]上述方案中，所述将所述数据治理结果发送给所述中心节点，包括：
[0017]将所述数据治理结果转换为结构化数据格式；
[0018]将所述结构化数据格式的数据治理结果发送给所述中心节点。
[0019]上述方案中，所述将所述数据治理结果发送给所述中心节点，包括：
[0020]获取所述中心节点的业务系统订阅的主题信息；
[0021]将符合所述主题信息的数据治理结果发送给对应的业务系统。
[0022]上述方案中，所述从所述边缘计算网络的中心节点获取所述边缘节点对应的数据治理任务，包括：
[0023]监听所述中心节点发布的集群资源配置文件；所述集群资源配置文件包括各个边缘节点的数据治理任务；
[0024]若监听到所述集群资源配置文件发生变化，从所述中心节点获取所述集群资源配置文件；
[0025]根据所述集群资源配置文件，获取所述边缘节点对应的数据治理任务。
[0026]上述方案中，所述基于所述数据治理任务对所述边缘节点获取到的物联网数据进行数据治理，包括：
[0027]基于所述数据治理任务更新所述边缘节点的配置文件；
[0028]基于更新后的所述配置文件，对所述边缘节点获取到的物联网数据进行数据治理。
[0029]另一方面，本专利技术实施例提供了一种数据治理方法，应用于边缘计算网络中的中心节点，该方法包括：
[0030]基于用户的配置指令，生成各个边缘节点对应的数据治理任务；所述边缘计算网络包括多个边缘节点；
[0031]将所述数据治理任务发送给对应的边缘节点，以使所述边缘节点基于所述数据治理任务对获取到的物联网数据进行数据治理，得到数据治理结果。
[0032]另一方面，本专利技术实施例提供了一种数据治理装置，该装置包括：
[0033]获取模块，用于从所述边缘计算网络的中心节点获取所述边缘节点对应的数据治理任务；所述数据治理任务基于用户的配置指令生成；所述边缘计算网络包括多个边缘节点；
[0034]治理模块，用于基于所述数据治理任务对所述边缘节点获取到的物联网数据进行数据治理，得到数据治理结果；
[0035]第一发送模块，用于将所述数据治理结果发送给所述中心节点。
[0036]另一方面，本专利技术实施例提供了一种数据治理装置，该装置包括：
[0037]生成模块，用于基于用户的配置指令，生成各个边缘节点对应的数据治理任务；所述边缘计算网络包括多个边缘节点；
[0038]第二发送模块，用于将所述数据治理任务发送给对应的边缘节点，以使所述边缘节点基于所述数据治理任务对获取到的物联网数据进行数据治理，得到数据治理结果。
[0039]另一方面，本专利技术实施例提供了一种节点，包括处理器和存储器，所述处理器和存储器相互连接，其中，所述存储器用于存储计算机程序，所述计算机程序包括程序指令，所述处理器被配置用于调用所述程序指令，执行本专利技术实施例提供的数据治理方法的步骤。
[0040]另一方面，本专利技术实施例提供了一种计算机可读存储介质，包括：所述计算机可读存储介质存储有计算机程序。所述计算机程序被处理器执行时实现如本专利技术实施例提供的数据治理方法的步骤。
[0041]本专利技术实施例的边缘节点通过从边缘计算网络的中心节点获取对应的数据治理
任务，基于数据治理任务对边缘节点获取到的物联网数据进行数据治理，得到数据治理结果，将数据治理结果发送给中心节点。其中，边缘计算网络包括多个边缘节点，数据治理任务基于用户的配置指令生成。本实施例将数据治理任务下放给边缘节点进行处理，可以大幅度降低从边缘节点向中心节点的传输数据量，降低了中心节点的带宽和性能压力。用户可以根据自身需求配置数据治理任务，数据治理的灵活性强。而且中心节点可以直接获取到数据治理结果，提高了数据治理结果的实时性。
附图说明
[0042]图1是本专利技术实施例提供的一种边缘计算网络的架构示意图；
[0043]图2是本专利技术实施例提供的一种数据治理方法的实现流程示意图；
[0044]图3是本专利技术应用实施例提供的主题订阅的流程示意图；
[0045]图4是本专利技术实施例提供的另一种数据治理方法的实现流程示意图；
[0046]图5是本专利技术应用实施例提供的一种数据治理流程的示意图；
[0047]图6是本专利技术实施例提供的一种数据治理装置的示意图；
[0048]图7是本专利技术实施例提供的另一种数据治理装置的示意图；
[0049]图8是本专利技术一实施例提供的节点的示意图。
具体实施方式
[0050]下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。...

【技术保护点】

【技术特征摘要】
1.一种数据治理方法，应用于边缘计算网络中的边缘节点，其特征在于，所述方法包括：从所述边缘计算网络的中心节点获取所述边缘节点对应的数据治理任务；所述数据治理任务基于用户的配置指令生成；所述边缘计算网络包括多个边缘节点；基于所述数据治理任务对所述边缘节点获取到的物联网数据进行数据治理，得到数据治理结果；将所述数据治理结果发送给所述中心节点。2.如权利要求1所述的方法，其特征在于，所述基于所述数据治理任务对所述边缘节点获取到的设备数据进行数据治理，得到数据治理结果，包括：将获取到的物联网数据存储在所述边缘节点对应的时序数据库中；所述物联网数据包括时间戳；基于所述数据治理任务，对所述边缘节点对应的时序数据库中的物联网数据进行数据治理，得到所述数据治理结果。3.如权利要求2所述的方法，其特征在于，所述对所述边缘节点对应的时序数据库中的物联网数据进行数据治理，包括以下任意一项：确定所述时序数据库中的物联网数据的均值；确定所述时序数据库中的物联网数据的最大值；确定所述时序数据库中的物联网数据的最小值。4.如权利要求1所述的方法，其特征在于，所述将所述数据治理结果发送给所述中心节点，包括：将所述数据治理结果转换为结构化数据格式；将所述结构化数据格式的数据治理结果发送给所述中心节点。5.如权利要求1所述的方法，其特征在于，所述将所述数据治理结果发送给所述中心节点，包括：获取所述中心节点的业务系统订阅的主题信息；将符合所述主题信息的数据治理结果发送给对应的业务系统。6.如权利要求1所述的方法，其特征在于，所述从所述边缘计算网络的中心节点获取所述边缘节点对应的数据治理任务，包括：监听所述中心节点发布的集群资源配置文件；所述集群资源配置文件包括各个边缘节点的数据治理任务；若监听到所述集群资源配置文件发生变化，从所述中心节点获取所述集群资源配置文件；根据所述集群资源配置文件，获取所述边缘节点...

【专利技术属性】
技术研发人员：谷智勇，李静，熊涛，赵振阳，
申请(专利权)人：深信服科技股份有限公司，
类型：发明
国别省市：