【技术实现步骤摘要】
基于环境大数据的数据处理方法、系统、电子设备及介质
本专利技术涉及环境监测数据处理
,特别是涉及一种基于环境大数据的数据处理方法、系统、电子设备及介质。
技术介绍
现有技术中,对大气环境自动监测数据进行审核时,主要根据《环境空气质量监测网自动监测数据审核及复核技术要求》对环境监测的常规六参数进行审核,然而,其存在对颗粒物组分数据和VOCs数据的审核较少或存在没有进行数据审核的现象。另外,现有的大气环境自动监测数据审核对于国家数据平台软件采集的自动带有标识的数据,系统在自动审核时,会将带标识的数据自动判断为无效,审核人员需对带标识的数据逐一进行核对处理,并且需要基于经验识别异常数据和离群数据及判断数据的有效性,造成数据审核人员工作量大,同时人工审核造成数据审核的准确性低。
技术实现思路
本专利技术旨在至少在一定程度上解决上述技术问题,本专利技术提供了一种基于环境大数据的数据处理方法、系统、电子设备及介质。本专利技术采用的技术方案是:一种基于环境大数据的数据处理方法,包括以下步骤: >获取环境监测数据,本文档来自技高网...
【技术保护点】
1.一种基于环境大数据的数据处理方法,其特征在于:包括以下步骤:/n获取环境监测数据,所述环境监测数据中包括带有标识的数据和未带有标识的数据;/n对带有标识的数据进行预处理,得到预处理后数据;/n根据数据审核规则对未带有标识的数据进行处理,将与数据审核规则不匹配的未带有标识的数据标记为预审数据,将与数据审核规则匹配的未带有标识的数据标记为有效数据;/n根据接收的预审数据确认请求,将预审数据标记为无效数据;或,根据接收的预审数据取消请求,将预审数据标记为有效数据;/n根据环境监测数据、标记为有效数据的预审数据和输出的有效数据,对数据审核规则进行优化,得到优化后的数据审核规则; ...
【技术特征摘要】
1.一种基于环境大数据的数据处理方法,其特征在于:包括以下步骤:
获取环境监测数据,所述环境监测数据中包括带有标识的数据和未带有标识的数据;
对带有标识的数据进行预处理,得到预处理后数据;
根据数据审核规则对未带有标识的数据进行处理,将与数据审核规则不匹配的未带有标识的数据标记为预审数据,将与数据审核规则匹配的未带有标识的数据标记为有效数据;
根据接收的预审数据确认请求,将预审数据标记为无效数据;或,根据接收的预审数据取消请求,将预审数据标记为有效数据;
根据环境监测数据、标记为有效数据的预审数据和输出的有效数据,对数据审核规则进行优化,得到优化后的数据审核规则;
输出所有的有效数据。
2.根据权利要求1所述的一种基于环境大数据的数据处理方法,其特征在于:所述带有标识的数据为运行不良、连接不良、等待数据恢复、有效数据不足、数据超上限、数据超下限、零点检查、跨度检查、进度检查、零点校准、跨度校准和/或仪器回补时的数据。
3.根据权利要求1所述的一种基于环境大数据的数据处理方法,其特征在于:所述数据审核规则中包括异常数据,所述异常数据包括零负值、超出上下限值数据、突高值数据、离群值数据、连续不变值数据、颗粒物数据倒挂数据、阴阳离子失衡数据、转化率异常数据和/或离子颗粒物比值异常数据。
4.根据权利要求1所述的一种基于环境大数据的数据处理方法,其特征在于:对带有标识的数据进行预处理时,具体步骤如下:
对带有标识的数据进行标注,并将带有标识的数据认定为无效数据。
5.根据权利要求4所述的一种基于环境大数据的数据处理方法,其特征在于:对带有标识的数据进行标注时,将带有标识的数据的底色更改为红色底色。
6.根据权利要求1所述的一种基于环境大数据的数据处理方法,其特征在于:所述预审数据确认请求包括审核确认请求和/或复核确认请求,所述预审数据取消请求包括审核取消请求和/或复核取消...
【专利技术属性】
技术研发人员:杨婧瑶,林奕真,陈钊,叶紫辉,钟国秋,
申请(专利权)人:广州风创科技有限公司,
类型:发明
国别省市:广东;44
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。