一种基于孤立森林的物联网设备数据异常检测方法技术

本发明专利技术公开了一种基于孤立森林的物联网设备数据异常检测方法，属于物联网设备数据处理技术领域，解决了现有设备因自身情况、环境条件等原因造成数据异常的问题。本发明专利技术包括S1、针对上报数据的设备，判断设备有效性；S2、判断设备上报数据的有效性；S3、判断数据类型，将累加数据转换为频率数据；S4、判断设备上报数据的合理性；S5、在常规数据库中判断设备上报数据是否孤立；S6、在知识数据库中判断设备上报数据是否孤立；S7、人工判断处理异常数据库中的数据。通过本发明专利技术的物联网设备数据异常检测方法，对物联网设备的运行数据进行一系列的异常过滤，极大程度上保证了数据的准确性。极大程度上保证了数据的准确性。极大程度上保证了数据的准确性。

【技术实现步骤摘要】
一种基于孤立森林的物联网设备数据异常检测方法


[0001]本专利技术属于物联网设备管理
，具体涉及一种基于孤立森林的物联网设备数据异常检测方法。

技术介绍

[0002]设备是涉及物联网系统的基础设置，随着物联网的发展，设备的作用不仅仅体现在现场使用上，更大的价值是，通过网络上报数据，由信息化系统进行数据整理存档可查，同时针对已收集的数据进行大数据分析，为分析决策提供数据依据，对农业的信息化发展发挥着巨大的作用，因此保证设备上报数据的正确性是非常有必要的。设备数据异常检测机制，对设备上报数据在入库之前通过层层筛选处理，保证入库数据的正确性，是大数据统计分析数据的前提。
[0003]由于农业物联网的特殊性，不仅具有不同功能的设备不同，而且具有相同功能的设备类型也繁多，即使同种类型的设备、同一台设备由于土壤、气候、种植作物等的差别和变化，设备的运行参数也会不同，加之设备数量庞大，设备实际运行状况千差万别，所以采集数据项多，存在多种多样的海量数据，不可能通过设备工作现场的人工去甄别每一个数据的正确性，如果不能反映设备实际运行的异常数据直接本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于孤立森林的物联网设备数据异常检测方法，其特征在于，包括如下步骤：S1、针对上报数据的设备，判断设备有效性；若设备有效，则进入步骤S2；若设备无效，则丢弃数据，并记录；S2、判断设备上报数据的有效性；若为有效数据，则进入步骤S3；若为无效数据，则丢弃数据，并记录；S3、判断数据类型，将累加数据转换为频率数据；S4、判断设备上报数据的合理性；若为合理数据，则进入步骤S5；若为不合理数据，则数据进入异常数据库；S5、在常规数据库中进行孤立计算，判断设备上报数据是否孤立；若为孤立数据，则进入步骤S6；若为不孤立数据，则留存到常规数据库中；S6、在知识数据库中进行孤立计算，判断设备上报数据是否孤立；若为孤立数据，则进入异常数据库；若为不孤立数据，则进入到常规数据库中；S7、人工判断处理异常数据库中的数据；若人工判断其为非常规运行状态下的正常的数据，则进入常规数据库和知识数据库；若人工判断仍属于异常数据，则丢弃数据，并记录。2.根据权利要求1所述方法，其特征在于，所述S2包括如下步骤：S21、判断设备上报的数据是否可解析，若能解析，则进入步骤S22；若不能解析则丢弃，并记录；S22、判断设备上报的数据项是否满足正则，若满足正则，则进入步骤S23；若不满足正则则丢弃，并记录；S23、根据设备唯一标识查询常规数据库，获取到该设备的临界值；S24、判断设备上报数据中每个数据项是否在临界值范围内，若在临界值范围内，则进入步骤S3；若不在临界值范围内，则丢弃，并记录。3.根据权利要求1所述方法，其特征在于，所述S3包括如下步骤：S31、根据设备传输规范，判断数据为累加数据还是频率数据；若为累加数据进入步骤S32；若为频率数据进入步骤S4；S32、将累加数据转换为频率数据，然后进入步骤S4。4.根据权利要求1所述方法，其特征在于，所述...

【专利技术属性】
技术研发人员：潘冬艳，常慧中，杨龙，
申请(专利权)人：北京慧图科技集团股份有限公司，
类型：发明
国别省市：