【技术实现步骤摘要】
一种数据的处理方法及装置、电子设备、存储介质
[0001]本申请涉及数据处理
,尤其涉及一种数据的处理方法及装置、电子设备、存储介质。
技术介绍
[0002]目前物联平台主要通过边缘代理来向物联装置采集点获取数据,但由于边缘代理具有类型多样化、设置不一致等特点,会导致通过边缘代理发送至物联平台的物联装置采集点数据存在数据值重复、数据值缺失等重大问题,所以如何对边缘代理所发送的采集数据进行处理显得尤为重要。
[0003]在现有的技术中,当边缘代理接收物联装置采集点的数据时,可以根据特定的处理规则对该数据进行过滤或清洗,再将处理后的数据发送至物联平台,从而实现对边缘代理所发送的采集数据进行处理。
[0004]但是,由于与物联平台通信的边缘代理具有类型多样化、设置不一致等特点,从而无法保证处理后完的数据不存在质量不一、脏数据等问题。
技术实现思路
[0005]基于上述现有技术的不足,本申请提供了一种数据的处理方法及装置、电子设备、存储介质,以解决现有技术无法保证处理后的采集数据不存在异常数据的 ...
【技术保护点】
【技术特征摘要】
1.一种数据的处理方法,其特征在于,包括:获取边缘代理发送的物联装置的采集点数据;基于预设规则,对所述采集点数据进行监测;其中,所述预设规则指代多种分析组合的规则;当监测到所述采集点数据存在异常时,确定所述采集点数据的异常处理方式。2.根据权利要求1所述的方法,其特征在于,所述预设规则至少包括周期监测规则、数值监测规则以及异常值监测规则,所述基于预设规则,对所述采集点数据进行监测,包括:基于所述周期监测规则,对所述采集点数据进行监测;基于所述数值监测规则,对所述采集点数据进行监测;基于所述异常值监测规则,对所述采集点数据进行监测。3.根据权利要求2所述的方法,其特征在于,所述基于所述周期监测规则,对所述采集点数据进行监测,包括:获取所述物联装置的历史采集点数据;利用预设方法,对所述历史采集点数据进行统计,得到所述历史采集点数据的最大值以及平均值;判断所述采集点数据是否均不小于所述历史采集点数据的最大值以及所述平均值;其中,所述判断出所述采集点数据均不小于所述历史采集点数据的最大值以及所述平均值,则确定所述采集点数据存在异常。4.根据权利要求2所述的方法,其特征在于,所述基于所述数值监测规则,对所述采集点数据进行监测,包括:判断所述采集点数据中是否存在重复值;若判断出所述采集点数据中存在重复值,则判断所述采集点数据中是否存在空值;若判断出所述采集点数据中存在空值,则检测所述采集点数据是否匹配字典表中的字典值;若检测出所述采集点数据未匹配所述字典表中的字典值,则判断所述采集点数据中的日期格式是否满足预设格式;若判断出所述采集点数据中的日期格式不满足所述预设格式,则确定所述采集点数据存在异常。5.根据权利要求2所述的方法,其特征在于,所述基于所述异常...
【专利技术属性】
技术研发人员:崔跃君,李卫华,
申请(专利权)人:北京中电普华信息技术有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。