海洋经济监测数据质量控制方法及装置制造方法及图纸

技术编号:20945193 阅读:44 留言:0更新日期:2019-04-24 02:40
本发明专利技术提供了一种海洋经济监测数据质量控制方法及装置,该方法包括:基于预先构建的数据采集系统,采集包括多个与海洋经济相关联的制度数据以及多个综合数据的第一待处理数据集;检验第一待处理数据集的完整性以及重复性,筛除不完整的所述综合数据和/或重复的所述综合数据,将剩下的综合数据作为第二待处理数据集;检验第二待处理数据集的准确性,得到第二待处理数据集中的每条数据的准确性标识符;为第二待处理数据集中的每条数据进行可靠度等级划分;输出带有准确性标识符以及可靠度等级的第二待处理数据集。该方法提高了海洋经济监测数据的处理效率和整体水平,减少了返工操作,节省了人力和物力成本。

Quality Control Method and Device for Marine Economic Monitoring Data

The invention provides a method and device for quality control of marine economic monitoring data. The method includes: collecting a system data associated with marine economy and a first data set to be processed based on a pre-constructed data acquisition system; checking the integrity and repeatability of the first data set to be processed; and screening out the incomplete comprehensive data and data./ Or duplicate the synthesized data and regard the remaining synthesized data as the second data set to be processed; verify the accuracy of the second data set to be processed and obtain the accuracy identifier of each data in the second data set to be processed; classify the reliability level of each data in the second data set to be processed; and output the second waiting place with the accuracy identifier and reliability level. Manage data sets. This method improves the processing efficiency and overall level of marine economic monitoring data, reduces the rework operation, and saves human and material costs.

【技术实现步骤摘要】
海洋经济监测数据质量控制方法及装置
本专利技术涉及移动互联网领域,具体而言,涉及一种海洋经济监测数据质量控制方法及装置。
技术介绍
随着海洋经济监测方式的不断拓展,通过制度统计、企业直报系统、调查等传统渠道及大数据等新兴渠道获取的监测数据日益丰富,形成的海洋经济监测指标体系具有覆盖内容广,数据来源多且可信度不一等特点,但目前尚未形成一个综合的数据质量控制方法及处理装置,不同机构对于数据准确性和可靠性的处理方式也无法通用。此外,当海洋经济监测数据的用途发生改变时,数据处理过程容易重新返工,不但影响工作效率,且对海洋经济统计数据管理工作带来不便。
技术实现思路
有鉴于此,本专利技术实施例的目的在于提供一种海洋经济监测数据质量控制方法及装置,以缓解上述问题。第一方面,本专利技术实施例提供了一种海洋经济监测数据质量控制方法,所述方法包括:所述方法包括:基于预先构建的数据采集系统,采集第一待处理数据集,所述第一待处理数据集包括多个与海洋经济相关联的制度数据以及多个综合数据;检验所述第一待处理数据集的完整性以及重复性,筛除不完整的所述综合数据和/或重复的所述综合数据,将剩下的所述综合数据作为第二待处本文档来自技高网...

【技术保护点】
1.一种海洋经济监测数据质量控制方法,其特征在于,所述方法包括:基于预先构建的数据采集系统,采集第一待处理数据集,所述第一待处理数据集包括多个与海洋经济相关联的制度数据以及多个综合数据;检验所述第一待处理数据集的完整性以及重复性,筛除不完整的所述综合数据和/或重复的所述综合数据,将剩下的所述综合数据作为第二待处理数据集;检验所述第二待处理数据集的准确性,得到所述第二待处理数据集中的每条数据的准确性标识符;为所述第二待处理数据集中的每条数据进行可靠度等级划分;输出带有准确性标识符以及可靠度等级的第二待处理数据集。

【技术特征摘要】
1.一种海洋经济监测数据质量控制方法,其特征在于,所述方法包括:基于预先构建的数据采集系统,采集第一待处理数据集,所述第一待处理数据集包括多个与海洋经济相关联的制度数据以及多个综合数据;检验所述第一待处理数据集的完整性以及重复性,筛除不完整的所述综合数据和/或重复的所述综合数据,将剩下的所述综合数据作为第二待处理数据集;检验所述第二待处理数据集的准确性,得到所述第二待处理数据集中的每条数据的准确性标识符;为所述第二待处理数据集中的每条数据进行可靠度等级划分;输出带有准确性标识符以及可靠度等级的第二待处理数据集。2.根据权利要求1所述的方法,其特征在于,在筛除不完整的所述综合数据和/或重复的所述综合数据之后,所述方法还包括:在显示界面上显示筛除原因,所述筛除原因包括:数据不完整和/或数据重复提交。3.根据权利要求1所述的方法,其特征在于,检验所述第一待处理数据集的完整性,包括:针对所述第一待处理数据集中的每条数据,检验该数据是否包含与预先保存的预设字段所对应的字段信息;在为是时,确定该数据为完整数据;否则,确定该数据为不完整数据。4.根据权利要求1所述的方法,其特征在于,检验所述第一待处理数据集的重复性,包括:针对所述第一待处理数据集中的每条数据,检验该数据是否与已经上报过的综合数据具有相同的名称以及频度,所述频度包括年度、季度或者月度;在为是时,确定该数据为重复数据;否则,确定该数据为不重复数据。5.根据权利要求1所述的方法,其特征在于,为所述第二待处理数据集中的每条数据进行可靠度等级划分,包括:针对所述第二待处理数据集中的每条数据,计算该数据的可靠度分值;基于所述可靠度分值,为该数据划分可靠度等级,所述可靠度等级包括高可靠度、一...

【专利技术属性】
技术研发人员:郭越郑莉付瑞全彭星宋维玲化蓉黄超
申请(专利权)人:国家海洋信息中心
类型:发明
国别省市:天津,12

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1