【技术实现步骤摘要】
一种环境监测数据的处理方法、装置、存储介质及终端
本专利技术涉及计算机
,特别涉及一种环境监测数据的处理方法、装置、存储介质及终端。
技术介绍
现有的对环境监测数据的处理方法为,通过采集装置采集符合预设要求的环境监测数据,其中,预设要求包括预设区域和预设时间段等等条件。实际应用中,通过采集装置采集到的环境监测数据的数据量往往很大,这样,如果想要在众多数据中搜索到用户想要的某些数据,例如,某省某市某区域、2020年6月1日至2020年6月30日的雾霾(例如,PM2.5的数据)数据,则需要在众多数据中进行检索,上述检索往往需要耗费大量的时间,甚至由于数据量过于庞大,可能会出现查询时间过长,出现延迟,甚至会出现查询系统瘫痪的现象。此外,为了保证数据的精准度,往往还需要引入人工复查检索结果。总之,现有技术,对环境监测数据的处理方法往往需要耗费大量的人力和物力。尤其在环境监测数据库中的各个环境监测数据的数量过于庞大的情况下,若是对数据进行处理,例如,基于至少一项关键词,在环境监测数据库中搜索符合至少一项关键词的环境监测数据,这样,数据处理的过程往往过于耗时,而且还可能导致服务器系统瘫痪。
技术实现思路
本申请实施例提供了一种环境监测数据的处理方法、装置、存储介质及终端。为了对披露的实施例的一些方面有一个基本的理解,下面给出了简单的概括。该概括部分不是泛泛评述,也不是要确定关键/重要组成元素或描绘这些实施例的保护范围。其唯一目的是用简单的形式呈现一些概念,以此作为后面的详细说明的序言。< ...
【技术保护点】
1.一种环境监测数据的处理方法,其特征在于,所述方法包括:/n对环境监测数据按照预设方式进行数据存储,得到各项存储的环境监测数据;/n对各项存储的环境监测数据分别计算哈希值,得到对应的哈希值,并分别将具有同一哈希值的各项存储的环境监测数据归至对应的同一数据库中,得到多个数据库;/n对多个数据库的环境监测数据进行数据同步,得到分别处于多个数据库中的各个同步化的环境监测数据,并对处于多个数据库中的各个同步化的环境监测数据分别进行异构化处理,得到对应的异构化处理后的环境监测数据。/n
【技术特征摘要】
1.一种环境监测数据的处理方法,其特征在于,所述方法包括:
对环境监测数据按照预设方式进行数据存储,得到各项存储的环境监测数据;
对各项存储的环境监测数据分别计算哈希值,得到对应的哈希值,并分别将具有同一哈希值的各项存储的环境监测数据归至对应的同一数据库中,得到多个数据库;
对多个数据库的环境监测数据进行数据同步,得到分别处于多个数据库中的各个同步化的环境监测数据,并对处于多个数据库中的各个同步化的环境监测数据分别进行异构化处理,得到对应的异构化处理后的环境监测数据。
2.根据权利要求1所述的方法,其特征在于,在所述得到对应的异构化处理后的环境监测数据之后,所述方法还包括:
对分别处于多个数据库中的各个异构化处理后的环境监测数据进行同步检索,得到与至少一项检索关键词匹配的环境监测数据。
3.根据权利要求1所述的方法,其特征在于,在所述分别将具有同一哈希值的各项存储的环境监测数据归至对应的同一数据库中,得到多个数据库之后,所述方法还包括:
从多个数据库中选取任一数据库,并将采集时间处于同一时间段内的环境监测数据归为对应的同一个表格中。
4.根据权利要求1所述的方法,其特征在于,在所述对环境监测数据按照预设方式进行数据存储,得到各项存储的环境监测数据之后,所述方法还包括:
在各项存储的环境监测数据对应的采集时间均比当前时间晚的情况下,则判定各项存储的环境监测数据均为无效数据;在各项存储的环境监测数据对应的采集时间均比当前时间早的情况下,则根据各项存储的环境监测数据自动生成对应的表格。
5.根据权利要求1所述的方法,其特征在于,所述对处于多个数据库中的各个同步化的环境监测数据分别进行异构化处理包括:
对所述同步化的环境监测数据进行入库处理,并生成对应的入库日志;
根据预先配置的数据库格式,对各个入库日志进行日志格式转换,得到各个转换后的入库日志;
对各个转换后的入库日志进行消息发送,并对发送的包括各个转换后的入库日志的消息进行订阅,并转换成符合预设格式的环境监测数据;
对所述符合预设格式的环境监测数据进行缓存。
6.根据权利要求1所述的方法,其特征在于,所述预设方式包括以第一预设方向存储数据的第一预设子方式和以第二预设方向存储数据的第二预设子方式,所述第一预设方向与所述第二预设方向是不同的方向,所述对所述环境监测数据按照预设方式进行数据...
【专利技术属性】
技术研发人员:张潮,周政男,晏平仲,刘慧灵,林久人,赵明生,秦东明,
申请(专利权)人:中科三清科技有限公司,
类型:发明
国别省市:北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。