当前位置: 首页 > 专利查询>周磊专利>正文

地表水水质数据粗误差筛查方法及装置制造方法及图纸

技术编号:15194547 阅读:71 留言:0更新日期:2017-04-20 16:47
本公开提供了一种地表水水质数据粗误差筛查方法及装置,所述方法包括以下步骤:获取预设的目标筛查时间段内的地表水监测数据;确定所述目标筛查时间段所属的预设时段,其中,各个所述预设时段具有各自相对应的筛查算法;根据与所述目标筛查时间段所属的预设时段相对应的筛查算法判断所述地表水监测数据是否是粗误差数据。本公开可以自动将地表水监测数据中的粗误差数据筛查出来,同时,本公开提供的方法的适用性更广,不仅能准确判断粗误差数据项,并且对大量数据的计算效率较高,增加地表水监测数据的可靠性。

【技术实现步骤摘要】

本公开涉及误差数据筛查领域,具体地,涉及一种地表水水质数据粗误差筛查方法及装置
技术介绍
地表水水质的自动监测,实现了水质的实时连续监测和远程监控,有助于及时掌握主要流域重点断面水体的水质状况,预警预报重大或流域性水质污染事故,解决跨行政区域的水污染事故纠纷。地表水水质自动监测的前端是数据的数据质量监控和粗误差筛查,进行合理、高效、准确的数据筛查可以为地表水水质监测提供更可靠的数据输入。在现有技术中,常规筛查方式可以筛查出因人为管理因素、仪器设备故障、自然灾害等异常条件导致的明显异常的监测数据或粗误差数据,但常规筛查方式得出的数据粗误差筛查准确率较低,处理大批量数据时效率较低,且存在筛选不准确,容易漏筛或者误判等情况。
技术实现思路
本公开的目的是提供一种地表水水质数据粗误差筛查方法和装置,以对地表水水质的自动监测数据进行准确、高效的数据粗误差筛查。为了实现上述目的,根据本公开的第一方面,提供一种地表水水质数据粗误差筛查方法,所述方法包括以下步骤:获取预设的目标筛查时间段内的地表水监测数据;确定所述目标筛查时间段所属的预设时段,其中,各个所述预设时段具有各自相对应的筛查算法;根据与所述目标筛查时间段所属的预设时段相对应的筛查算法判断所述地表水监测数据是否是粗误差数据。可选地,在所述根据与所述目标筛查时间段所属的预设时段相对应的筛查算法判断所述地表水监测数据是否是粗误差数据的步骤之前,所述方法还包括:通过常规筛查算法判断所述地表水监测数据是否是粗误差数据;在通过常规筛查算法确定所述地表水监测数据不是粗误差数据时,再执行所述根据与所述目标筛查时间段所属的预设时段相对应的筛查算法判断所述地表水监测数据是否是粗误差数据的步骤。可选地,所述预设时段包括第一预设时段、第二预设时段和第三预设时段,其中,所述第一预设时段为[t1,t2),所述第二预设时段为[t2,t3),所述第三预设时段为[t3,+∞),t1为第一时间阈值,t2为第二时间阈值,t3为第三时间阈值,且t1<t2<t3。可选地,与所述第一预设时段相对应的筛查算法包括:从所述目标筛查时间段内的地表水监测数据中获取目标地表水监测数据,其中,所述目标地表水监测数据为所述目标筛查时间段内的任一地表水监测数据;确定所述目标筛查时间段内的地表水监测数据中、除所述目标地表水监测数据之外的其他地表水监测数据的平均值和标准差;判断所述目标地表水监测数据与所述平均值之间的差的绝对值是否大于第一阈值,其中,所述第一阈值为所述标准差与T分布检验数的乘积,所述T分布检验数由目标筛查时间段内的地表水监测数据的个数和第一预设显著度确定;在所述绝对值大于第一阈值时,确定所述目标地表水监测数据是粗误差数据;在所述绝对值小于或等于第一阈值时,确定所述目标地表水监测数据不是粗误差数据。可选地,与所述第二预设时段相对应的筛查算法包括:将所述目标筛查时间段内的地表水监测数据按照由小到大的顺序排列,形成监测数据序列;确定所述监测数据序列的中位数和标准差;从所述目标筛查时间段内的地表水监测数据中获取目标地表水监测数据,其中,所述目标地表水监测数据为所述目标筛查时间段内的任一地表水监测数据;判断所述目标地表水监测数据和所述中位数之间的差的绝对值、与所述标准差之间的比值是否大于第二阈值,其中,所述第二阈值为由目标筛查时间段内的地表水监测数据的个数和第二预设显著度确定的格拉布斯临界值;在所述比值大于第二阈值时,确定所述目标地表水监测数据是粗误差数据;在所述比值小于或等于第二阈值时,确定所述目标地表水监测数据不是粗误差数据。可选地,与所述第三预设时段相对应的筛查算法包括:确定所述目标筛查时间段内的地表水监测数据的平均值和标准差;从所述目标筛查时间段内的地表水监测数据中获取目标地表水监测数据,其中,所述目标地表水监测数据为所述目标筛查时间段内的任一地表水监测数据;判断所述目标地表水监测数据和所述平均值之间的差的绝对值是否大于第三阈值,其中,所述第三阈值为所述标准差的预定倍数;在所述绝对值大于第三阈值时,确定所述目标地表水监测数据是粗误差数据;在所述绝对值小于或等于第三阈值时,确定所述目标地表水监测数据不是粗误差数据。可选地,所述方法还包括:在确定所述地表水监测数据是粗误差数据时,执行以下处理操作中的至少一者:输出报警提示信息;删除确定为粗误差数据的地表水监测数据。可选地,在所述执行所述处理操作中的至少一者的步骤之前,所述方法还包括:输出确认信息,所述确认信息用于用户对被确定为是粗误差数据的地表水监测数据进行人工核查;接收用户响应消息;在所述用户响应消息表示用户确认所述地表水监测数据是粗误差数据时,再执行所述处理操作中的至少一者的步骤。根据本公开的第二方面,还提供一种地表水水质数据粗误差筛查装置,所述装置包括:数据获取模块,用于获取预设的目标筛查时间段内的地表水监测数据;预设时段确定模块,用于确定所述目标筛查时间段所属的预设时段,其中,各个所述预设时段具有各自相对应的筛查算法;第一判断模块,用于根据与所述目标筛查时间段所属的预设时段相对应的筛查算法判断所述地表水监测数据是否是粗误差数据。可选地,所述装置还包括:第二判断模块,用于通过常规筛查算法判断所述地表水监测数据是否是粗误差数据;所述第一判断模块用于在通过常规筛查算法确定所述地表水监测数据不是粗误差数据时,再执行所述根据与所述目标筛查时间段所属的预设时段相对应的筛查算法判断所述地表水监测数据是否是粗误差数据的步骤。通过上述技术方案,可以自动将地表水监测数据中的粗误差数据筛查出来,同时,本公开提供的方法的适用性更广,不仅能准确判断粗误差数据项,并且对大量数据的计算效率较高,增加地表水监测数据的可靠性。本公开的其他特征和优点将在随后的具体实施方式部分予以详细说明。附图说明附图是用来提供对本公开的进一步理解,并且构成说明书的一部分,与下面的具体实施方式一起用于解释本公开,但并不构成对本公开的限制。在附图中:图1是根据本公开的一种实施方式提供的地表水水质粗误差筛查方法的流程图;图2是根据本公开的另一种实施方式提供的地表水水质粗误差筛查方法的流程图;图3-图5分别是与所述第一预设时段、第二预设时段和第三预设时段相对应的筛查算法的流程图;图6是根据本公开的另一种实施方式提供的地表水水质粗误差筛查方法的流程图;图7是根据本公开的另一种实施方式提供的地表水水质粗误差筛查方法的流程图;图8是根据本公开的一种实施方式提供的地表水水质粗误差筛查装置的框图;图9是根据本公开的另一种实施方式提供的地表水水质粗误差筛查装置的框图。具体实施方式以下结合附图对本公开的具体实施方式进行详细说明。应当理解的是,此处所描述的具体实施方式仅用于说明和解释本公开,并不用于限制本公开。根据本公开的第一方面,本公开提供一种地表水水质数据粗误差筛查方法,图1所示,是根据本公开的一种实施方式提供的地表水水质粗误差筛查方法的流程图。如图1所示,所述方法包括以下步骤:在步骤S11中,获取预设的目标筛查时间段内的地表水监测数据,所述预设的目标筛查时间段为技术人员根据经验和地域环境的类型等综合设定的时间段;在步骤S12中,确定所述目标筛查时间段所属的预设时段,其中,各个所述预设时段具有各自本文档来自技高网...
地表水水质数据粗误差筛查方法及装置

【技术保护点】
一种地表水水质数据粗误差筛查方法,其特征在于,所述方法包括以下步骤:获取预设的目标筛查时间段内的地表水监测数据;确定所述目标筛查时间段所属的预设时段,其中,各个所述预设时段具有各自相对应的筛查算法;根据与所述目标筛查时间段所属的预设时段相对应的筛查算法判断所述地表水监测数据是否是粗误差数据。

【技术特征摘要】
1.一种地表水水质数据粗误差筛查方法,其特征在于,所述方法包括以下步骤:获取预设的目标筛查时间段内的地表水监测数据;确定所述目标筛查时间段所属的预设时段,其中,各个所述预设时段具有各自相对应的筛查算法;根据与所述目标筛查时间段所属的预设时段相对应的筛查算法判断所述地表水监测数据是否是粗误差数据。2.根据权利要求1所述的方法,其特征在于,在所述根据与所述目标筛查时间段所属的预设时段相对应的筛查算法判断所述地表水监测数据是否是粗误差数据的步骤之前,所述方法还包括:通过常规筛查算法判断所述地表水监测数据是否是粗误差数据;在通过常规筛查算法确定所述地表水监测数据不是粗误差数据时,再执行所述根据与所述目标筛查时间段所属的预设时段相对应的筛查算法判断所述地表水监测数据是否是粗误差数据的步骤。3.根据权利要求1所述的方法,其特征在于,所述预设时段包括第一预设时段、第二预设时段和第三预设时段,其中,所述第一预设时段为[t1,t2),所述第二预设时段为[t2,t3),所述第三预设时段为[t3,+∞),t1为第一时间阈值,t2为第二时间阈值,t3为第三时间阈值,且t1<t2<t3。4.根据权利要求3所述的方法,其特征在于,与所述第一预设时段相对应的筛查算法包括:从所述目标筛查时间段内的地表水监测数据中获取目标地表水监测数据,其中,所述目标地表水监测数据为所述目标筛查时间段内的任一地表水监测数据;确定所述目标筛查时间段内的地表水监测数据中、除所述目标地表水监测数据之外的其他地表水监测数据的平均值和标准差;判断所述目标地表水监测数据与所述平均值之间的差的绝对值是否大于第一阈值,其中,所述第一阈值为所述标准差与T分布检验数的乘积,所述T分布检验数由目标筛查时间段内的地表水监测数据的个数和第一预设显著度确定;在所述绝对值大于第一阈值时,确定所述目标地表水监测数据是粗误差数据;在所述绝对值小于或等于第一阈值时,确定所述目标地表水监测数据不是粗误差数据。5.根据权利要求3所述的方法,其特征在于,与所述第二预设时段相对应的筛查算法包括:将所述目标筛查时间段内的地表水监测数据按照由小到大的顺序排列,形成监测数据序列;确定所述监测数据序列的中位数和标准差;从所述目标筛查时间段内的地表水监测数据中获取目标地表水监测数据,其中,所述目标地表水监测数据为所述目标筛查时间段内的任一地表水监测数据;判断所述目标地表水监测...

【专利技术属性】
技术研发人员:周磊
申请(专利权)人:周磊
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1