用于架空输电线负荷评估的气象大数据的筛选预处理方法技术

本发明专利技术公开了一种用于架空输电线负荷评估的气象大数据的筛选预处理方法，包括以下步骤：S1、对源数据进行筛选；S2、对于源数据中丢失的数据利用大数据的改进插值拟合的方法进行补充。该方法对影响输电线路负荷能力的气象数据进行筛选和去噪，通过从原始气象数据的预处理，包括去噪以及插值补充，提高了源数据的利用率与准确性，在具体实现上，通过MATLAB编程调用工具箱，实现起来简洁方便。本发明专利技术可有效处理用于架空输电线路负荷评价的大量气象数据的筛选与预处理，并作为有效分析架空输电线负荷评估的气象大数据关联关系的基础。

Selection and pretreatment method of large meteorological data for overhead transmission line load evaluation

The invention discloses a method for transmission of meteorological data wire load assessment of the screening pretreatment method, which comprises the following steps: S1, S2, data source selection; method for missing source data using the improved interpolation and fitting the data to supplement. The method of meteorological data transmission line load capacity for screening and denoising, by preprocessing the raw meteorological data, including denoising and interpolation, and improved the efficiency and accuracy of the source data, in the concrete implementation, through the MATLAB programming toolbox, to achieve simple and convenient. The invention can effectively process the selection and pretreatment of a large number of meteorological data for the evaluation of overhead transmission lines, and is used as the basis for the effective analysis of the meteorological data association relation of the overhead transmission line load evaluation.

【技术实现步骤摘要】

本专利技术涉及气象大数据筛选预处理的
，特别涉及一种用于架空输电线负荷评估的气象大数据的筛选预处理方法。
技术介绍
随着科技的进步，电力工作人员对负荷预测准确程度的要求越来越高，要求对内部和外部影响的因素进行全面梳理，建立合理的数学模型，制定合理的计算方法，让负荷预测结论做到快、精、细、准，做到合理调度电力负荷。电力负荷受各种因素的影响尤其是气候因素的影响特别明显，因此有必要研究出电力负荷与各主要影响因素之间的关系及相关程度，从而大大提升电力负荷预测的精度，确保电力供需达到平衡，不再出现“拉闸限电”现象。通过对电力负荷的跟踪调查，发现气象因素的变化影响电网负荷的变化，特别是随着智能电网的建设、智能家电的普及和应用以及人民群众生活水平的不断提升，对居住环境舒适度的要求越来越高，气象因素的变化对电力负荷变化影响程度也越来越大。因此有必要研究气象因素对电力负荷影响的规律，从而在一定程度上提高电力负荷预测的精度，保证电力很好的服务于地方经济发展，提供可靠的电网支撑，提供优质的电力服务。为了更好地对相关的关键因素进行大数据的处理建模，必须要对原始数据进行一定的修正与补足，进而提高整个模型的准确性与完整性。其中插值运算是根据数据的分布规律，找到一个函数表达式可以连接已知的各点，并用此函数表达式预测两点之间任意位置上的函数值。而如果能够利用插值中的多维插值的方法，便可对多维气象大数据进行统一的预处理，大大提高整个建模效率。
技术实现思路
本专利技术的目的在于克服现有技术的缺点与不足，提供一种用于架空输电线负荷评估的气象大数据的筛选预处理方法，通过对气象大数据进行去噪和标准化，可促进建立不同因素之间的关联关系，进而有效提高输电线路负荷实时监测与动态增容能力。本专利技术的目的通过下述技术方案实现：一种用于架空输电线负荷评估的气象大数据的筛选预处理方法，所述筛选预处理方法包括下列步骤：S1、对源数据进行筛选，该步骤具体包括：S101、从源数据中分析找出噪声数据与坏数据；S102、采用相似性方法设置数据合理的阈值范围，对超出范围的数据进行剔除；S2、对于源数据中丢失的数据利用大数据的改进插值拟合的方法进行补充，该步骤具体包括：S201、从源数据中分析找出丢失的数据；S202、确定进行插值拟合的区域范围以及相关参数；S203、使用多维插值的命令进行插值补充，在离散的原始气象大数据的基础上补插连续函数；S204、在每两个坐标轴上使用二维插值的方法，进行修正，并且对比不同的参数设置，选择最佳方案；S205、画出插值拟合图像；S206、对原图像进行上色以及光滑处理。进一步地，所述步骤S101、从源数据中分析找出噪声数据与坏数据具体过程如下：通过设置不同温度的阈值，若温度间的变化超过阈值设定的范围，即其中α(t),β(t)为设置的阈值，则判断该数据为噪声数据与坏数据。进一步地，所述步骤S102、采用相似性方法设置数据合理的阈值范围，对超出范围的数据进行剔除具体过程如下：对于给定原始数据：如果有其中α(t),β(t)为阈值，则用下式对x(i,t)进行修复：其中而x(i,t)表示第i天第t时刻的数据。进一步地，所述步骤S203、使用多维插值的命令进行插值补充具体过程如下：使用Matlab中的n维插值函数VI＝interpn(X1,X2,X3...V,Y1,Y2,Y3,…,method)对源数据进行插值补充。本专利技术相对于现有技术具有如下的优点及效果：本专利技术提出的用于架空输电线负荷评估的气象大数据的筛选预处理方法，通过从原始气象数据的预处理，包括去噪以及插值补充，提高了源数据的利用率与准确性，在具体实现上，通过MATLAB编程调用工具箱，实现起来简洁方便。本专利技术可有效处理用于架空输电线路负荷评价的大量气象数据的筛选与预处理，并作为有效分析架空输电线负荷评估的气象大数据关联关系的基础。附图说明图1是本专利技术中公开的用于架空输电线负荷评估的气象大数据的筛选预处理方法的流通步骤图；图2(a)是使用MATLAB实现一组三维原始数据的插值补充的示意图；图2(b)是使用MATLAB实现一组三维原始数据的插值补充的涂色后的示意图；图2(c)是使用MATLAB实现一组三维原始数据的插值补充的涂色并进行光滑处理后的示意图；图3(a)是经过数据预处理之后的数据进行三维插值补充的上色并光滑处理后的示意图；图3(b)是经过数据预处理之后的数据进行三维插值补充后在底面坐标的投影示意图。具体实施方式为使本专利技术的目的、技术方案及优点更加清楚、明确，以下参照附图并举实施例对本专利技术进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本专利技术，并不用于限定本专利技术。实施例对于绝大部分地区而言，气象因素是影响架空输电线路负荷的主要影响因素。正确分析关于架空输电线负荷的气象大数据之间以及气象大数据与架空输电线数据的相互关联关系对于增大架空输电线负荷评估的正确性具有重大意义。影响架空输电线负荷的气象因素有很多。为了计算架空输电线负荷的气象大数据之间以及气象大数据与架空输电线数据的相互关联关系的前提必须按是提取气象因素关键信息，如温度、湿度、风向、风速等，并对这些关键信息的数据进行标准化处理，同时对于架空输电线路主要指标和常规负荷进行筛选与去噪，才能进行后期建模分析。请参见图1，图1是本实施例中公开的用于架空输电线负荷评估的气象大数据的筛选预处理方法的流通步骤图。在本实施例中使用代表位置和温度的三维数据进行描述。本专利使用插值方法对原始数据进行补充，而对于其中的异常数据采取设置标准阈值的方法进行剔除。图1所示的用于架空输电线负荷评估的气象大数据的筛选预处理方法，具体包括以下步骤：S1、对源数据进行筛选；该步骤具体又包括下列子步骤：S101、从源数据中分析找出噪声数据与坏数据；通过分析所研究的区域以及最终的应用选择，初步找出对于所要研究的问题中有干扰的以及不合理的数据。具体应用中，通过设置不同温度的阈值，若温度间的变化超过阈值设定的范围，即其中α(t),β(t)为设置的阈值，则认为该数据对于所要研究的问题是有干扰的以及不合理的噪声数据与坏数据。S102、采用相似性方法设置数据合理的阈值范围，对超出范围的数据进行剔除；具体应用中，该步骤的过程如下：对于给定原始数据：如果有其中α(t),β(t)为阈值，则需要用下式对x(i,t)进行修复：其中而x(i,t)表示第i天第t时刻的数据。在这里X轴、Y轴分别代表图中坐标，可以通过X、Y的值来唯一确定给定数据在图中的位置。S2、对于源数据中丢失的数据利用大数据的改进插值拟合的方法进行补充；该步骤又包括下列子步骤：S201、从源数据中分析找出丢失的数据；分析所研究的区域以及最终的研究目的，找出对于所要研究的问题中所缺少的数据以及必要数据。即对于研究的某坐标或者区域的气象数据没有出现在原始数据中，则认为该坐标或者区域的数据为丢失的数据。S202、确定进行插值拟合的区域范围以及相关参数；在本实施例中，随机选取一块区域作为具体实施例来进行说明，经过如上处理后的数据格的具体数值在Matlab中的格式如下所示：x＝0:400:5600；y＝0:400:4800；z＝[370 470 550 600 670 690 670 620 580 450 400本文档来自技高网...

【技术保护点】
一种用于架空输电线负荷评估的气象大数据的筛选预处理方法，其特征在于，所述筛选预处理方法包括下列步骤：S1、对源数据进行筛选，该步骤具体包括：S101、从源数据中分析找出噪声数据与坏数据；S102、采用相似性方法设置数据合理的阈值范围，对超出范围的数据进行剔除；S2、对于源数据中丢失的数据利用大数据的改进插值拟合的方法进行补充，该步骤具体包括：S201、从源数据中分析找出丢失的数据；S202、确定进行插值拟合的区域范围以及相关参数；S203、使用多维插值的命令进行插值补充，在离散的原始气象大数据的基础上补插连续函数；S204、在每两个坐标轴上使用二维插值的方法，进行修正，并且对比不同的参数设置，选择最佳方案；S205、画出插值拟合图像；S206、对原图像进行上色以及光滑处理。

【技术特征摘要】
1.一种用于架空输电线负荷评估的气象大数据的筛选预处理方法，其特征在于，所述筛选预处理方法包括下列步骤：S1、对源数据进行筛选，该步骤具体包括：S101、从源数据中分析找出噪声数据与坏数据；S102、采用相似性方法设置数据合理的阈值范围，对超出范围的数据进行剔除；S2、对于源数据中丢失的数据利用大数据的改进插值拟合的方法进行补充，该步骤具体包括：S201、从源数据中分析找出丢失的数据；S202、确定进行插值拟合的区域范围以及相关参数；S203、使用多维插值的命令进行插值补充，在离散的原始气象大数据的基础上补插连续函数；S204、在每两个坐标轴上使用二维插值的方法，进行修正，并且对比不同的参数设置，选择最佳方案；S205、画出插值拟合图像；S206、对原图像进行上色以及光滑处理。2.根据权利要求1所述的用于架空输电线负荷评估的气象大数据的筛选预处理方法，其特征在于，所述步骤S...

【专利技术属性】
技术研发人员：綦昆仑，刘刚，李炀，
申请(专利权)人：华南理工大学，
类型：发明
国别省市：广东;44