一种基于溯源关系的电力台账数据校验方法及装置制造方法及图纸

本发明专利技术实施例提供基于溯源关系的电力台账数据校验方法及装置。所述方法包括：获取源业务系统的第一台账数据、数据中心的第二台账数据、省侧电能主站原始表的第三台账数据、省侧电能主站上传表的第四台账数据和电能质量在线监测系统的第五台账数据；基于所述第一台账数据、第二台账数据、第三台账数据、第四台账数据和第五台账数据，获取重复率校验数据、字段冗余率校验数据、丢失率校验数据、集成字段准确率校验数据、溯源关系前后环节的一致性校验数据、集成及时率校验数据和溯源关系前后环节推送数据的校验数据中的一种或多种。本发明专利技术实施例实现了针对不同数据源、不同数据类型的基础数据的规范化处理，提高了管理的率和自动集成化比例。

A method and device for checking power account data based on traceability relationship

The embodiment of the invention provides a checking method and device for power account data based on traceability relationship. The method includes: acquiring the first account data of the source business system, the second account data of the data center, the third account data of the original table of the provincial power master station, the fourth account data of the provincial power master station uploading table and the fifth account data of the power quality online monitoring system; based on the first account data and the second account data, the third account data of the provincial power master station uploading table is obtained. Account data, third account data, fourth account data and fifth account data are obtained to obtain repetition rate verification data, field redundancy verification data, loss rate verification data, integrated field accuracy verification data, consistency verification data before and after traceability relationship, integration and timeliness verification data and traceability relationship. Links push one or more of the data in the verification data. The embodiment of the invention realizes the standardized processing of basic data for different data sources and different data types, and improves the management rate and the automatic integration ratio.

【技术实现步骤摘要】
一种基于溯源关系的电力台账数据校验方法及装置
本专利技术实施例涉及电力自动化领域，尤其涉及一种基于溯源关系的电力台账数据校验方法及装置。
技术介绍
目前，随着电力系统的快速发展，电网积累了大量的统计数据，但因电能质量在线监测系统的研究起步较晚，成体系、有针对性的研究比较少等原因，导致电能质量的管理存在效率低、数据利用率不高等问题。数据质量校验是从管理和技术相结合的角度对数据进行管理，对分布在各系统中的零散数据进行统一管理，使数据具有唯一性、完整性、合理性和一致性的特性，保证数据的准确性，为统计、制定决策建立坚实的数据基础。目前，跨系统、跨业务、跨部门电网数据管理及监测工作中，存在如下问题：在源业务系统数据经过推送、采集、转换、上传、入库环节到总部电能质量在线监测系统的过程中，由于数据库管理系统存在缺陷、操作人员操作失误等因素，数据往往存在着自动集成比例低、数据总量不完整、数据字段不匹配、数据关键字段冗余等问题。不利于电网数据科学有效的统计分析，不利于电网可靠性水平的提升。
技术实现思路
针对现有技术存在的问题，本专利技术实施例提供一种基于溯源关系的电力台账数据校验方法及装置，实现了针对不同数据源、不同数据类型的基础数据的规范化处理，提高了管理的率和自动集成化比例。第一方面，本专利技术实施例一种电力台账数据校验方法，包括：获取源业务系统的第一台账数据、数据中心的第二台账数据、省侧电能主站原始表的第三台账数据、省侧电能主站上传表的第四台账数据和电能质量在线监测系统的第五台账数据；基于所述第一台账数据、第二台账数据、第三台账数据、第四台账数据和第五台账数据，获取重复率校验数据、字段冗余率校验数据、丢失率校验数据、集成字段准确率校验数据、溯源关系前后环节的一致性校验数据、集成及时率校验数据和溯源关系前后环节推送数据的校验数据中的一种或多种。第二方面，本专利技术实施例一种电力台账数据校验装置，包括：数据获取模块，用于获取源业务系统的第一台账数据、数据中心的第二台账数据、省侧电能主站原始表的第三台账数据、省侧电能主站上传表的第四台账数据和电能质量在线监测系统的第五台账数据；数据校验模块，用于基于所述第一台账数据、第二台账数据、第三台账数据、第四台账数据和第五台账数据，获取重复率校验数据、字段冗余率校验数据、丢失率校验数据、集成字段准确率校验数据、溯源关系前后环节的一致性校验数据、集成及时率校验数据和溯源关系前后环节推送数据的校验数据中的一种或多种。第三方面，本专利技术实施例提供一种电力台账数据校验设备，包括：至少一个处理器；以及与所述处理器通信连接的至少一个存储器，其中：所述存储器存储有可被所述处理器执行的程序指令，所述处理器调用所述程序指令能够执行本专利技术实施例电力台账数据校验方法及其任一可选实施例的方法。第四方面，本专利技术实施例提供一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行本专利技术实施例电力台账数据校验方法及其任一可选实施例的方法。本专利技术实施例提供的一种电力台账数据校验方法，基于源业务系统与数据中心、数据中心与省侧电能主站原始表、省侧电能主站原始表与省侧电能主站上传表、省侧电能主站上传表与总部电能质量在线监测系统台账数据的溯源关系，通过溯源关系数据对比，进行数据的冗余性、完整性、准确性、一致性、及时性、智能性的评估，从而实现了针对不同数据源、不同数据类型的基础数据的规范化处理的功能，为电网提供了科学、可靠的统计结果，大大提高了电网数据质量管理的效率和自动集成化比例。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术实施例一种电力台账数据校验方法流程示意图；图2为本专利技术实施例一种电力台账数据校验设备的框架示意图。具体实施方式为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。图1为本专利技术实施例一种电力台账数据校验方法流程示意图，如图1所示，所述方法包括：S100，获取源业务系统的第一台账数据、数据中心的第二台账数据、省侧电能主站原始表的第三台账数据、省侧电能主站上传表的第四台账数据和电能质量在线监测系统的第五台账数据；具体的，所述源业务系统，是指电能质量在线监测系统数据来源的原始系统。所述数据中心，是对中转台账数据进行存储的系统。所述省侧电能主站原始表，是省侧电能质量在线监测系统主站对存储台账数据的表。省侧电能主站上传表，是省侧电能质量在线监测系统主站对原始表台账数据进行转换后存储的表。具体的，电力系统的台账数据包括：主网13类设施(避雷器、电流互感器、电压互感器、母线、架空线路、电缆线路、隔离开关、阻波器、组合电器、变压器、电抗器、耦合电容器、断路器)、公用配网配电变压器及柱上变压器、变电站、供电专用用户和供电电压监测点。S200，基于所述第一台账数据、第二台账数据、第三台账数据、第四台账数据和第五台账数据，获取重复率校验数据、字段冗余率校验数据、丢失率校验数据、集成字段准确率校验数据、溯源关系前后环节的一致性校验数据、集成及时率校验数据和溯源关系前后环节推送数据的校验数据中的一种或多种。具体的，本专利技术实施例可以获取上述校验数据中的任意一种或任意多种；对于上述每一种校验数据，可以根据所述第一台账数据、第二台账数据、第三台账数据、第四台账数据和第五台账数据中的一种或多种数据进行计算得到。具体的，所述重复率校验数据是指：当前集成环节业务主键重复数据/当前集成环节数据总量。所述字段冗余率校验数据是指：电能质量在线监测系统某台账需要字段/当前类型台账字段总量。所述丢失率校验数据是指：(下一环节数据总量-当前环节的数据总量)/当前环节的数据总量。其中总量为去除业务主键重复的数量。所述集成字段准确率校验数据是指：某类型台账长度及格式符合要求的字段/当前类型台账字段总量。所述溯源关系前后环节的一致性校验数据是指：相邻环节关键字段(如投运日期)一致的数据总量/相邻环节能匹配的数据总量。所述集成及时率校验数据是指：各环节数据及时集成的数量/当前环节的数据总量。所述溯源关系前后环节推送数据的校验数据是指：当前环节推送到下一环节的数据总量/当前环节的数据总量。需要说明的是，溯源关系是指基于源业务系统与数据中心、数据中心与省侧电能主站原始表、省侧电能主站原始表与省侧电能主站上传表、省侧电能主站上传表与总部电能质量在线监测系统之间数据的溯源对比，针对评价指标评价数据质量问题。具体的，所述源业务系统包括PMS系统、用电信息采集系统、供电电压自动采集系统；所述评价对象包括：所述源业务系统、数据中心、省侧电能主站原始表、省侧电能主站上传表及电能质量在线监测系统所监测的电力设施、供电公用用户、供电专用用户和供电电压监测点。所述电力设施以本文档来自技高网...

【技术保护点】
1.一种电力台账数据校验方法，其特征在于，包括：获取源业务系统的第一台账数据、数据中心的第二台账数据、省侧电能主站原始表的第三台账数据、省侧电能主站上传表的第四台账数据和电能质量在线监测系统的第五台账数据；基于所述第一台账数据、第二台账数据、第三台账数据、第四台账数据和第五台账数据，获取重复率校验数据、字段冗余率校验数据、丢失率校验数据、集成字段准确率校验数据、溯源关系前后环节的一致性校验数据、集成及时率校验数据和溯源关系前后环节推送数据的校验数据中的一种或多种。

【技术特征摘要】
1.一种电力台账数据校验方法，其特征在于，包括：获取源业务系统的第一台账数据、数据中心的第二台账数据、省侧电能主站原始表的第三台账数据、省侧电能主站上传表的第四台账数据和电能质量在线监测系统的第五台账数据；基于所述第一台账数据、第二台账数据、第三台账数据、第四台账数据和第五台账数据，获取重复率校验数据、字段冗余率校验数据、丢失率校验数据、集成字段准确率校验数据、溯源关系前后环节的一致性校验数据、集成及时率校验数据和溯源关系前后环节推送数据的校验数据中的一种或多种。2.根据权利要求1所述的方法，其特征在于，所述重复率校验数据通过以下方法获取：分别统计所述第一台账数据、第二台账数据、第三台账数据、第四台账数据和第五台账数据中评价对象的业务主健重复数据的数据量和数据总量；分别计算所述第一台账数据、第二台账数据、第三台账数据、第四台账数据和第五台账数据中业务主健重复数据的数据量和数据总量的比例，分别获取所述源业务系统、数据中心、省侧电能主站原始表、省侧电能主站上传表及电能质量在线监测系统的重复率校验数据；所述字段冗余率校验数据通过以下方法获取：分别统计所述第三台账数据、第四台账数据和第五台账数据中评价对象的字段总量与第五台账数据中评价对象所需要的字段数量；计算第五台账数据中评价对象的所需要的字段数量与所述第三台账数据、第四台账数据和第五台账数据中分评价对象的字段总量的比例，获取字段冗余率校验数据。3.根据权利要求1所述的方法，其特征在于，所述丢失率校验数据通过以下方法获取：分别统计所述第一台账数据、第二台账数据、第三台账数据、第四台账数据和第五台账数据中评价对象的去除业务主健重复的数据量；基于所述源业务系统、数据中心、省侧电能主站原始表、省侧电能主站上传表及电能质量在线监测系统的溯源关系，根据下一环节的数据量与当前环节的数据量，计算数据丢失的比例，获取溯源关系前后环节的丢失率校验数据。4.根据权利要求1所述的方法，其特征在于，所述集成字段准确率校验数据通过以下方法获取：分别统计所述第三台账数据和第四台账数据中评价对象的目标字段的格式准确数量与目标字段的数据总量；计算目标字段的格式准确数量与目标字段的数据总量的比例，获取准确率校验数据。5.根据权利要求1所述的方法，其特征在于，所述溯源关系前后环节的一致性校验数据通过以下方法获取：基于所述第二台账数据、第三台账数据...

【专利技术属性】
技术研发人员：胡庆辉，施明泰，张建功，田洪迅，王宏刚，许中平，李浩松，李金，康泰峰，蔡亚琦，胡栋梁，凌思，雷庭，
申请(专利权)人：国家电网有限公司，北京国网信通埃森哲信息技术有限公司，国网信息通信产业集团有限公司，
类型：发明
国别省市：北京,11