一种电力设备静态数据质量评估方法及系统技术方案

本发明专利技术公开了一种电力设备静态数据质量评估方法及系统，所述方法包括：采集电力设备静态数据，并根据预设规则对电力设备静态数据进行随机抽样，获得数据样本；根据需求选择所需的数据质量评估维度、以及所述所需数据质量评估维度下的一个或多个评估指标；根据预设规则对所述数据样本在多个评估指标中进行指标评价，获得每个评估指标对应的指标评价结果；根据预设规则对多个评估指标进行权重分配；根据每个评估指标对应的指标评价结果以及权重分配结果，计算获得电力设备静态数据质量评估结果；通过本方法及系统获得有效的异常情况评价结果，可及时掌握电力设备数据整体质量情况以及各项具体指标的优劣，便于后续针对性的进行数据优化和治理。

A Method and System for Static Data Quality Assessment of Electric Power Equipment

【技术实现步骤摘要】
一种电力设备静态数据质量评估方法及系统
本专利技术涉及电力
，更具体地，涉及一种电力设备静态数据质量评估方法及系统。
技术介绍
近年来国内外对于在线监测装置整体及部件有效性开展了大量研究。通过分析不同类型在线监测数据异常的特点，研究了各类数据异常模式识别方法，实现了单一数据流和多数据流的异常检测，并探讨了异常数据的统计分布特性。上述所指的数据异常检测多是从在线监测数据异常出发，多利用模式识别的方法，预先分析总结异常数据种类及特征，然后用规则表征特征识别异常数据，该方法受限于专家总结的模式数量与表征方法，针对性较强，在数据量愈加庞大的今天，数据缺失、重复、不一致等异常问题花样翻出，现有的方法无法识别出未收录到模式识别中的新型异常模式，使得数据异常无法被有效检测，对数据质量的评估也无法做到准确。
技术实现思路
为了解决
技术介绍
存在的针对数据缺失、重复、不一致等异常情况无法有效检测，对数据质量的评估也不准确的问题，本专利技术提供了一种电力设备静态数据质量评估方法及系统，所述方法及系统通过对数据在准确性、完备性、一致性、及时性以及数据接入情况等方面进行综合评价，通过加权计算获得数据质量评估本文档来自技高网...

【技术保护点】
1.一种电力设备静态数据质量评估方法，所述方法包括：采集电力设备静态数据，并根据预设规则对电力设备静态数据进行随机抽样，获得数据样本；根据需求选择所需的数据质量评估维度、以及所述所需数据质量评估维度下的一个或多个评估指标；所述数据质量评估维度包括数据接入情况、准确性、完备性、一致性以及及时性；根据预设规则对所述数据样本在多个数据质量评估维度下的多个评估指标中进行指标评价，获得每个评估指标对应的指标评价结果；根据预设规则对所述多个数据质量评估维度下的多个评估指标进行权重分配；根据每个评估指标对应的指标评价结果以及权重分配结果，计算获得电力设备静态数据质量评估结果。

【技术特征摘要】
1.一种电力设备静态数据质量评估方法，所述方法包括：采集电力设备静态数据，并根据预设规则对电力设备静态数据进行随机抽样，获得数据样本；根据需求选择所需的数据质量评估维度、以及所述所需数据质量评估维度下的一个或多个评估指标；所述数据质量评估维度包括数据接入情况、准确性、完备性、一致性以及及时性；根据预设规则对所述数据样本在多个数据质量评估维度下的多个评估指标中进行指标评价，获得每个评估指标对应的指标评价结果；根据预设规则对所述多个数据质量评估维度下的多个评估指标进行权重分配；根据每个评估指标对应的指标评价结果以及权重分配结果，计算获得电力设备静态数据质量评估结果。2.根据权利要求1所述的方法，其特征在于，根据预设规则对电力设备静态数据进行随机抽样，包括：根据预设的数据特征对所述电力设备静态数据进行分层；对每层数据采用简单随机抽样方法进行抽样，并获得多组分层抽样数据；汇总所述多组分层抽样数据，获得数据样本。3.根据权利要求1所述的方法，其特征在于：所述数据接入情况包括指标数据自动采集率以及指标历史数据接入率；所述指标数据自动采集率通过数据样本中自动采集的数据项的个数与应当被采集的数据项个数的比值获得；所述指标历史数据接入率通过在预设时间内采集到的数据项的个数与应当采集到的数据项的个数。4.根据权利要求1所述的方法，其特征在于：所述准确性包括数据句法准确性、数据语义准确性、数据准确性测量覆盖率、元数据准确性、数据范围的准确性以及数据值精度；所述数据句法准确性通过拥有句法准确性相关值的数据项的个数与对句法准确性有要求的数据项的个数的比值获得；所述数据语义准确性通过语义准确的数据值的个数与对语义准确性有要求的数据值的个数的比值获得；所述数据准确性测量覆盖率通过已测量准确性的数据项的个数与对测量准确性有要求的数据项的个数的比值获得；所述元数据准确性通过提供了需求信息的元数据的个数与在数据的需求规格说明中定义的元数据的个数的比值获得；所述数据规范的规范性通过包含在指定区间中的数据项的个数与预设要求在所述指定区间内的数据项的个数的比值获得；所述数据值精度通过具有精度要求且达到精度要求的数据值的个数与具有精度需求要求的数据值的个数的比值获得。5.根据权利要求1所述的方法，其特征在于：所述完备性包括记录完备性、属性完备性、数据文件完备性、数据文件空记录比例以及元数据完备性；所述记录完备性通过每个记录中关联值非空的数据项的个数与能测量完备性的记录的数据项的个数的比值的平均值获得；所述属性完备性通过每个特定的数据项关联值非空的记录的个数与技术的记录的个数的比值的平均值获得；所述数据文件完备性通过每个数据文件中记录的个数与该文件应记录个数的比值的平均值获得；所述数据文件空记录比例通过1与数据文件中全部数据项记录为空的个数与数据文件中所记录的个数的比值的差值获得；所述元数据完备性通过数据字典中有完整元数据的属性的个数与数据字典中应有完整元数据的属性的个数的比值获得。6.根据权利要求1所述的方法，其特征在于：所述一致性包括引用完整性、数据格式一致性、数据不一致风险、数据一致性覆盖率以及语义一致性；所述引用完整性通过1与同一个数据项引用到不同的数据文件中的数值不一致的个数与定义需考虑引用完整性的数据项的个数的比值的差值获得；所述数据格式一致性通过在不同数据文件的同一数据项的所有格式是一致的数据项的个数与定义需考虑数据格式一致性的数据项的个数的比值获得；所述数据不一致风险通过数据值重复的数据项的个数与定义数据值不可重复的数据项的个数的比值获得；所述数据一致性覆盖率通过数据值受一致性控制的数据项的个数与一致性测量的数据项的个数的比值获得；所述语义一致性通过数据值是语义正确的数据项的个数与定义语义规则的数据项的个数的比值获得。7.根据权利要求1所述的方法，其特征在于：所述及时性包括更新频率以及更新及时性；所述更新频率用于通过按预设频率被更新的数据项的个数与具有更新频率要求的数据项个数的比值获得；所述更新的及时性为按预设更新时间间隔更新的数据个数与该更新时间间隔内需更新数据项的个数的比值获得。8.根据权利要求1所述的方法，其特征在于：根据层级分析法对所述多个数据质量评估维度下的多个评估指标进行权重分配。9.根据权利要求1所述的方法，其特征在于：记录指标评价结果未达到满分的评估指标，根据所述未达到满分的评估指标的指标评价结果及具体数据信息进行预警。10.一种电力设备静态数据质量评估系统，所述系统包括：采集抽样单元，所述采集抽样单元用于采集电力设备静态数据，并根据预设规则对电力设备静态数据进行随机抽样，获得数据样本；指标评价单元，所述指标评价单元...

【专利技术属性】
技术研发人员：张博文，王峰，高飞，
申请(专利权)人：中国电力科学研究院有限公司，
类型：发明
国别省市：北京,11