【技术实现步骤摘要】
一种基于流计算处理的采集数据完整性记录及补召方法
[0001]本专利技术涉及数据补召
，尤其涉及一种基于流计算处理的采集数据完整性记录及补召技术。
技术介绍
[0002]数据补召，是指在某个数据集合中，对于数据缺失的部分进行补充的操作，可以通过删除法、算术平均数法、中位数法、众数法、回归法以及多重插值法对数据进行分析，取近似值填充数据缺失部分；
[0003]现有的数据补召技术中，通常都是在数据分析过程中发现数据缺失再对数据进行补召，且在数据补召过程中，通常都是通过数学算法对数据进行分析，取数据近似值对缺失数据进行填充，且在数据获取完成后难以对数据进行异常判断，现有的数据补召技术还存在数据补召不够及时以及补召数据不够精准，导致数据分析不够快速以及缺少精准的数据支持的问题。
技术实现思路
[0004]针对现有技术存在的不足，本专利技术提供了一种基于流计算处理的采集数据完整性记录及补召方法，能够获取设备应该采集的数据项，并通过采集端进行数据采集，通过对采集得到的数据进行分析判断数据是否正确，并更新数据...
【技术保护点】
【技术特征摘要】
1.一种基于流计算处理的采集数据完整性记录及补召方法，其特征在于，包括如下步骤：步骤S1，连接电能表，用于采集电能表日冻结电能示值以及负荷曲线数据；步骤S2，读取设备数据库，获取设备应采数据项；步骤S3，发送设备应采数据项至采集端，采集端对应采数据项对应的数据进行采集；步骤S4，采集完成后对数据进行分析，判断采集得到的数据是否为应采数据项，并更新应采数据项的采集状态；步骤S5，根据应采数据项的采集状态，判断数据采集是否完整，若采集数据不完整，则发送数据召测信号至采集端；步骤S6，接收数据召测信号，根据数据召测信号采集对应的应采数据项，并重新更新应采数据项的采集状态，直至数据采集完整为止；步骤S7，对采集到的应采数据项进行分析，判断数据是否异常，若数据异常则发送数据异常信号，并对数据异常的应采数据项进行多次数据获取。2.根据权利要求1所述的一种基于流计算处理的采集数据完整性记录及补召方法，其特征在于，所述步骤S1包括如下子步骤：步骤S101，连接电能表；步骤S102，向电能表内安装智能数据采集系统。3.根据权利要求2所述的一种基于流计算处理的采集数据完整性记录及补召方法，其特征在于，所述步骤S2包括如下子步骤：步骤S201，读取设备数据库；步骤S202，访问设备档案，获取设备对应的应采数据项；步骤S203、构建采集存储区，对应每一应采数据项建立索引指针；步骤S204、为索引指针配置衰减因子以使索引指针对应的索引值不同；步骤S205、根据不同的索引值为索引指针对应的应采数据项配置不同的存储策略。4.根据权利要求3所述的一种基于流计算处理的采集数据完整性记录及补召方法，其特征在于，所述步骤S3包括如下子步骤：步骤S301，发送应采数据项至采集端；步骤S302，采集端根据应采数据项对应的设备编号控制采集对应设备的应采数据项，将采集到的数据标记为实采数据项。5.根据权利要求4所述的一种基于流计算处理的采集数据完整性记录及补召方法，其特征在于，所述步骤S4包括如下子步骤：步骤S401，获取电能表对应的用户信息以生成用户特征；步骤S402，通过用户特征查询预先构建的选点策略表以获取对应的动态约束窗口；步骤S403，通过动态约束窗口确定下一时刻的应采数据范围，直至出现实采数据项的采集值超出所述应采数据范围；步骤S404，通过预设的示值匹配算法计算示值匹配值；步骤S405，计算偏差匹配值，有A＝α
d
G
a
min(|c
a
‑
h
a1
|,|c
a
‑
h
a2
|)/(h
a1
‑
h
a2
)，其中A为偏差匹配值，α
d
为预设的匹配偏差参数，G
a
为当前的示值匹配值，c
a
为实采数据项的采集值，h
a1
为当前的应采数据范围的上限值，h
a2
为当前的应采数据范围的下限值；
步骤S406，若偏差匹配值大于预设的基准偏差值，则判断实采数据项采集的数据异常。6.根据权利要求5所述的一种基于流计算处理的采集数据完整性记录及补召方法，其特征在于，所述动态约束窗口配置有动态约束条件，所述动态约束条件用于计算动态差值，所述动态差值为D
a
【专利技术属性】
技术研发人员：鄢盛腾，夏桃芳，高琛，郑伟山，林华，詹世安，丁忠安，林胤戎，王雅平，刘佳宁，陈伟寅，高强强，柳泽谋，李翔，徐琼，郑淑萍，
申请(专利权)人：国网信通亿力科技有限责任公司国网信息通信产业集团有限公司福建省供电服务有限责任公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。