一种水利数据处理系统、方法和存储介质技术方案

本发明专利技术公开了一种水利数据处理系统、方法和存储介质，所述系统包括水利数据获取平台、水利数据共享交换平台、水利数据资源目录平台、水利数据统一服务平台、水利数据资源运营管理平台、水利数据智能平台、水利数据治理平台，其中，水利数据获取平台获取水利数据后通过水利数据共享交换平台汇聚资源池，水利数据资源目录平台对资源池数据进行编目管理，所述水利数据统一服务平台和水利数据治理平台从资源池中获取所述水利数据并从水利数据智能平台获取算法和模型对水利数据进行处理后供水利数据资源运营管理平台调用。本发明专利技术实现了在一个系统和多个平台下共同管理水利数据，解决了水利行业数据质量低、缺乏统一的数据管理和安全的数据环境等问题。和安全的数据环境等问题。和安全的数据环境等问题。

【技术实现步骤摘要】
一种水利数据处理系统、方法和存储介质


[0001]本专利技术实施例涉及水利领域，特别是涉及一种水利数据处理系统、方法和存储介质。

技术介绍

[0002]目前，水利行业需要不断推进水利行业业务治理体系的完善和治理能力的提升，并围绕水安全、水资源、水环境、水生态、水工程、水监管、水文化、水行政等应用场景，利用大数据、人工智能、物联网、5G、遥感、边缘计算、移动互联、无人机、无人船等新一代信息技术，基于水利智能监测体系，聚焦水旱灾害防御、水资源开发利用、水资源三条红线管控、河湖长制履职监督、万里碧道建设管理、重大水利工程建设全生命周期管理等水利重点业务场景，打造水利智能高效的决策支持服务，达到“随地调阅、随时分析、随行指挥”的总体目标。相关技术中，水利行业水利数据的采集和处理不统一，已建信息系统繁多、分散构建。具体来说，普遍存在水利数据不能统一采集和处理、缺乏统一的数据管理和安全的数据环境等问题。
[0003]因此，相关技术存在的上述技术问题亟待解决。

技术实现思路

[0004]以下是对本文详细描述的主题的概述。本概述并非是为了限制权利要求的保护范围。
[0005]本专利技术实施例提供了一种水利数据处理方法、平台及系统，以解决当前普遍存在的水利数据质量低、缺乏统一的数据管理和安全的数据环境等问题，包括：
[0006]水利数据获取平台，用于获取水利数据；
[0007]水利数据共享交换平台，用于通过数据共享交换机制将所述水利数据存储至资源池；
[0008]水利数据资源目录平台，用于存储资源池并建立所述水利数据的资源目录；
[0009]水利数据统一服务平台，用于根据所述资源目录将所述水利数据设为共享数据，对所述共享数据进行加工处理，所述加工处理包括计算统计级、结构化、指标化的结果数据，并对脱敏数据集进行二次处理分析；
[0010]水利数据资源运营管理平台，用于对所述水利数据进行运营管理；
[0011]水利数据智能平台，用于存储处理所述水利数据需要的算法和模型；
[0012]水利数据治理平台，用于根据所述资源目录，对所述水利数据进行校验，清除所述资源目录中无效数据，定位所述资源目录中缺陷数据的来源；
[0013]其中，所述水利数据获取平台获取所述水利数据后，将所述水利数据通过所述水利数据共享交换平台汇聚到所述水利数据资源目录平台的所述资源池，所述水利数据统一服务平台、所述水利数据治理平台从所述资源池中获取所述水利数据并从所述水利数据智能平台获取算法和模型，根据所述算法和模型对所述水利数据进行处理，将处理后的水利
数据存储至所述资源池供所述水利数据资源运营管理平台调用。
[0014]在其中一个实施例中，所述水利数据共享交换平台还包括：对所述水利数据排序和编码，提取所述水利数据的特征，对所述水利数据进行关联性分析。
[0015]在其中一个实施例中，所述水利数据资源目录平台还包括：根据所述资源目录对所述水利数据进行校验，清除所述资源目录中无效数据，定位所述资源目录中缺陷数据的来源。
[0016]在其中一个实施例中，所述水利数据获取平台还包括：根据水利业务类型、数据类型和应用系统及数据库建设情况，进行数据资源调查，对业务产生和使用的信息进行梳理和清查，根据清查结果生成数据台账；根据所述数据台账，通过水利数据获取接口获取原始水利数据；通过预设的错误处理策略、断点续传和断点续抽对所述原始水利数据进行处理,连接所需多源数据库实时的捕获和保存数据；对处理后的所述水利数据建立不同业务表结构关联、不同系统业务数据间的关联，并将所述水利数据按照数据特性进行结构化存储、半结构化存储、非结构化存储；利用所述水利数据建立数据库。
[0017]在其中一个实施例中，所述数据库包括水文水资源数据库、山洪灾害数据库、水利工程数据库、、水生态环境数据库、水行政执法数据库、水文化数据库、地理空间数据库和水利视频数据库。
[0018]本专利技术实施例提供了一种水利数据处理方法，其特征在于，包括：
[0019]获取水利数据；
[0020]根据所述水利数据建立资源池；
[0021]通过算法和模型对所述水利数据进行处理并将处理后的水利数据存储至所述资源池；
[0022]根据需求调用所述资源池中的所述处理后的水利数据并输出所述处理后的水利数据。
[0023]在其中一个实施例中，所述方法还包括：
[0024]对所述水利数据进行关联性分析；
[0025]对所述水利数据进行排序和编码；
[0026]对所述水利数据进行区分和归类。
[0027]在其中一个实施例中，所述对所述水利数据进行排序和编码，所述方法包括：
[0028]将所述水利数据根据水利业务需要进行统一编码，所述统一编码包括建立标准分类管理单元、标准创建单元、质量规则设置单元、标准维护单元、标准映射。
[0029]在其中一个实施例中，所述根据所述资源池对所述水利数据进行区分和归类，所述方法包括：
[0030]确定所述水利数据的范围；
[0031]根据水利业务的区别对所述水利数据分类。
[0032]本专利技术实施例提供了一种计算机可读存储介质，存储有计算机可执行指令，所述计算机可执行指令用于执行如上述实施例中所述的水利数据处理方法。
[0033]本专利技术实施例的有益效果包括：将多平台集成到一个水利数据处理系统中，能够面向不同的用户群体，实现了在一个系统和多个平台下共同管理水利数据，解决了水利行业数据质量低、缺乏统一的数据管理和安全的数据环境等问题。
[0034]本专利技术的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本专利技术而了解。本专利技术的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
附图说明
[0035]附图用来提供对本专利技术技术方案的进一步理解，并且构成说明书的一部分，与本专利技术的实施例一起用于解释本专利技术的技术方案，并不构成对本专利技术技术方案的限制。
[0036]图1为本专利技术实施例提供的一种水利数据处理系统示意图；
[0037]图2为本专利技术实施例提供的一种水利数据处理方法流程图；
[0038]图3为本专利技术其中一个实施例的流程图。
具体实施方式
[0039]为了使本专利技术的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本专利技术进行进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本专利技术，并不用于限定本专利技术。
[0040]应了解，在本专利技术实施例的描述中，多个(或多项)的含义是两个以上，大于、小于、超过等理解为不包括本数，以上、以下、以内等理解为包括本数。如果有描述到“第一”、“第二”等只是用于区分技术特征为目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量或者隐含指明所指示的技术特征的先后关系。
[0041]目前，水利行业需要不断推进水利行本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种水利数据处理系统，其特征在于，包括：水利数据获取平台，用于获取水利数据；水利数据共享交换平台，用于通过数据共享交换机制将所述水利数据存储至资源池；水利数据资源目录平台，用于存储资源池并建立所述水利数据的资源目录；水利数据统一服务平台，用于根据所述资源目录将所述水利数据设为共享数据，对所述共享数据进行加工处理，所述加工处理包括计算统计级、结构化、指标化的结果数据，并对脱敏数据集进行二次处理分析；水利数据资源运营管理平台，用于对所述水利数据进行运营管理；水利数据智能平台，用于存储处理所述水利数据需要的算法和模型；水利数据治理平台，用于根据所述资源目录，对所述水利数据进行校验，清除所述资源目录中无效数据，定位所述资源目录中缺陷数据的来源；其中，所述水利数据获取平台获取所述水利数据后，将所述水利数据通过所述水利数据共享交换平台汇聚到所述水利数据资源目录平台的所述资源池，所述水利数据统一服务平台、所述水利数据治理平台从所述资源池中获取所述水利数据并从所述水利数据智能平台获取算法和模型，根据所述算法和模型对所述水利数据进行处理，将处理后的水利数据存储至所述资源池供所述水利数据资源运营管理平台调用。2.根据权利要求1所述的一种水利数据处理系统，其特征在于，所述水利数据共享交换平台还包括：对所述水利数据排序和编码，提取所述水利数据的特征，对所述水利数据进行关联性分析。3.根据权利要求1所述的一种水利数据处理系统，其特征在于，所述水利数据资源目录平台还包括：根据所述资源目录对所述水利数据进行校验，清除所述资源目录中无效数据，定位所述资源目录中缺陷数据的来源。4.根据权利要求1所述的一种水利数据处理系统，其特征在于，所述水利数据获取平台还包括：根据水利业务类型、数据类型和应用系统及数据库建设情况，进行数据资源调查，对业务产生和使用的信息进行梳理和清查，根据清...

【专利技术属性】
技术研发人员：魏琴，李满满，罗晓良，熊剑锋，王忠勋，傅东桦，吴宪爽，梁薇，文亮，
申请(专利权)人：联通广东产业互联网有限公司，
类型：发明
国别省市：