一种基于数据质量的电力市场数据分析方法、系统及设备技术方案

本发明专利技术提供了一种基于数据质量的电力市场数据分析方法、系统及设备，涉及电力市场数据分析领域。该方法包括：收集电力市场数据并进行预处理，生成预处理后的电力市场数据；利用数据质量评估模型对预处理后的电力市场数据进行质量评估，生成数据质量得分，判断预处理后的电力市场数据是否符合要求；修复未符合要求的电力市场数据并进行质量评估，生成新的数据质量得分；将新的数据质量得分作为数据质量得分，将修复后的电力市场数据作为电力市场数据进行预处理，返回判断步骤；当修复后的电力市场数据符合要求，对修复后的电力市场数据进行分析和挖掘，提取有用特征，生成数据分析报告。本发明专利技术有效避免了在数据分析和决策过程中出现误差。中出现误差。中出现误差。

【技术实现步骤摘要】
一种基于数据质量的电力市场数据分析方法、系统及设备


[0001]本专利技术涉及电力市场数据分析领域，特别是涉及一种基于数据质量的电力市场数据分析方法、系统及设备。

技术介绍

[0002]随着电力信息系统的不断建设，越来越多的生产、经营数据用于电力企业的运行管理和分析决策，在此之前，需要对电力市场数据进行加工处理以及统计分析，应用于电力企业管理、决策。而现有的电力市场数据处理方法往往没有考虑数据质量问题，导致在数据在分析和决策过程中出现误差。

技术实现思路

[0003]本专利技术的目的是提供一种基于数据质量的电力市场数据分析方法、系统及设备，以解决电力市场数据在分析和决策过程中出现误差的问题。
[0004]为实现上述目的，本专利技术提供了如下方案：
[0005]一种基于数据质量的电力市场数据分析方法，包括：
[0006]收集电力市场数据，并对所述电力市场数据进行预处理，生成预处理后的电力市场数据；
[0007]利用数据质量评估模型对所述预处理后的电力市场数据进行质量评估，生成数据质量得分；
[0008]根据所述数据质量得分，判断所述预处理后的电力市场数据是否符合要求；
[0009]修复未符合要求的电力市场数据，并对修复后的电力市场数据进行质量评估，生成新的数据质量得分；
[0010]将所述新的数据质量得分作为所述数据质量得分，将所述修复后的电力市场数据作为所述电力市场数据进行预处理，返回步骤“根据所述数据质量得分，判断所述预处理后的电力市场数据是否符合要求”；
[0011]当所述修复后的电力市场数据符合要求，对所述修复后的电力市场数据进行分析和挖掘，提取有用特征；
[0012]根据所述有用特征生成数据分析报告。
[0013]可选的，对所述电力市场数据进行预处理，生成预处理后的电力市场数据，具体包括：
[0014]清洗所述电力市场数据，生成清洗后的电力市场数据；
[0015]对所述清洗后的电力市场数据进行去重处理，生成去重后的电力市场数据；
[0016]根据业务需求及数据类型，对所述去重后的电力市场数据进行格式转换，生成预处理后的电力市场数据。
[0017]可选的，所述数据质量评估模型的构建过程，具体包括：
[0018]对所述电力市场数据进行特征提取，确定数据特征；所述数据特征包括数据结构、
数据类型、数据分布以及数据关系；
[0019]定义质量指标；所述质量指标包括数据的准确性、完整性、一致性以及可用性；
[0020]根据所述质量指标以及所述数据特征，构建数据质量评估模型。
[0021]可选的，根据所述数据质量得分，判断所述预处理后的电力市场数据是否符合要求，具体包括：
[0022]判断所述数据质量得分是否达到质量得分阈值；
[0023]当所述数据质量得分达到质量得分阈值，输出所述预处理后的电力市场数据的评估结果，并确定所述预处理后的电力市场数据符合要求；所述评估结果包括电力市场数据的质量得分、具体质量问题以及改进建议；
[0024]当所述数据质量得分未达到质量得分阈值，输出所述预处理后的电力市场数据的评估结果，并确定所述预处理后的电力市场数据不符合要求。
[0025]可选的，修复未符合要求的电力市场数据，具体包括：
[0026]补齐所述未符合要求的电力市场数据的缺失值，生成补齐后的电力市场数据；
[0027]纠正所述补齐后的电力市场数据的错误值，生成纠正后的电力市场数据；
[0028]剔除所述纠正后的电力市场数据的异常值，生成剔除后的电力市场数据。
[0029]可选的，根据所述有用特征生成数据分析报告，之后还包括：
[0030]可视化显示所述数据分析报告。
[0031]一种基于数据质量的电力市场数据分析系统，包括：
[0032]预处理模块，用于收集电力市场数据，并对所述电力市场数据进行预处理，生成预处理后的电力市场数据；
[0033]质量评估模块，用于利用数据质量评估模型对所述预处理后的电力市场数据进行质量评估，生成数据质量得分；
[0034]判断模块，用于根据所述数据质量得分，判断所述预处理后的电力市场数据是否符合要求；
[0035]修复模块，用于修复未符合要求的电力市场数据，并对修复后的电力市场数据进行质量评估，生成新的数据质量得分；
[0036]步骤返回模块，用于将所述新的数据质量得分作为所述数据质量得分，将所述修复后的电力市场数据作为所述电力市场数据进行预处理，返回步骤“根据所述数据质量得分，判断所述预处理后的电力市场数据是否符合要求”；
[0037]信息提取模块，用于当所述修复后的电力市场数据符合要求，对所述修复后的电力市场数据进行分析和挖掘，提取有用特征；
[0038]数据分析报告生成模块，用于根据所述有用特征生成数据分析报告。
[0039]可选的，预处理模块，具体包括：
[0040]清洗单元，用于清洗所述电力市场数据，生成清洗后的电力市场数据；
[0041]去重处理单元，用于对所述清洗后的电力市场数据进行去重处理，生成去重后的电力市场数据；
[0042]格式转换单元，用于根据业务需求及数据类型，对所述去重后的电力市场数据进行格式转换，生成预处理后的电力市场数据。
[0043]一种电子设备，包括存储器及处理器，所述存储器用于存储计算机程序，所述处理
器运行所述计算机程序以使所述电子设备执行上述任一项所述的基于数据质量的电力市场数据分析方法。
[0044]一种计算机可读存储介质，其存储有计算机程序，所述计算机程序被处理器执行时实现上述任一项所述的基于数据质量的电力市场数据分析方法。
[0045]根据本专利技术提供的具体实施例，本专利技术公开了以下技术效果：本专利技术提供了一种基于数据质量的电力市场数据分析方法、系统及设备，通过数据质量评估模型对所述预处理后的电力市场数据进行质量评估，生成数据质量得分，基于数据质量得分修复并评估电力市场数据，根据有用特征，帮助用户进行决策和预测，生成数据分析报告，有效避免了在数据分析和决策过程中出现误差。
附图说明
[0046]为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
[0047]图1为本专利技术所提供的基于数据质量的电力市场数据分析方法流程图。
具体实施方式
[0048]下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。...

【技术保护点】

【技术特征摘要】
1.一种基于数据质量的电力市场数据分析方法，其特征在于，包括：收集电力市场数据，并对所述电力市场数据进行预处理，生成预处理后的电力市场数据；利用数据质量评估模型对所述预处理后的电力市场数据进行质量评估，生成数据质量得分；根据所述数据质量得分，判断所述预处理后的电力市场数据是否符合要求；修复未符合要求的电力市场数据，并对修复后的电力市场数据进行质量评估，生成新的数据质量得分；将所述新的数据质量得分作为所述数据质量得分，将所述修复后的电力市场数据作为所述电力市场数据进行预处理，返回步骤“根据所述数据质量得分，判断所述预处理后的电力市场数据是否符合要求”；当所述修复后的电力市场数据符合要求，对所述修复后的电力市场数据进行分析和挖掘，提取有用特征；根据所述有用特征生成数据分析报告。2.根据权利要求1所述的基于数据质量的电力市场数据分析方法，其特征在于，对所述电力市场数据进行预处理，生成预处理后的电力市场数据，具体包括：清洗所述电力市场数据，生成清洗后的电力市场数据；对所述清洗后的电力市场数据进行去重处理，生成去重后的电力市场数据；根据业务需求及数据类型，对所述去重后的电力市场数据进行格式转换，生成预处理后的电力市场数据。3.根据权利要求1所述的基于数据质量的电力市场数据分析方法，其特征在于，所述数据质量评估模型的构建过程，具体包括：对所述电力市场数据进行特征提取，确定数据特征；所述数据特征包括数据结构、数据类型、数据分布以及数据关系；定义质量指标；所述质量指标包括数据的准确性、完整性、一致性以及可用性；根据所述质量指标以及所述数据特征，构建数据质量评估模型。4.根据权利要求1所述的基于数据质量的电力市场数据分析方法，其特征在于，根据所述数据质量得分，判断所述预处理后的电力市场数据是否符合要求，具体包括：判断所述数据质量得分是否达到质量得分阈值；当所述数据质量得分达到质量得分阈值，输出所述预处理后的电力市场数据的评估结果，并确定所述预处理后的电力市场数据符合要求；所述评估结果包括电力市场数据的质量得分、具体质量问题以及改进建议；当所述数据质量得分未达到质量得分阈值，输出所述预处理后的电力市场数据的评估结果，并确定所述预处理后的电力市场数据不符合要求。5.根据权利要求1所述的基于数据质量的电力市场数据分析方法，其特征在于，修复未符合要求的...

【专利技术属性】
技术研发人员：余杰文，邓鸿彬，梁田英，
申请(专利权)人：南方电网数字电网科技广东有限公司，
类型：发明
国别省市：