一种多系统差异数据巡检方法、系统和存储介质技术方案

本发明专利技术提供的一种多系统差异数据巡检方法、系统和存储介质，巡检方法包括：S10,连接不同的实时数据采集系统，对各实时数据采集系统中的数据进行采集；S20,对采集的异源数据进行数据融合，将描述同一变量特征的异源数据归为一类；S30,按类对融合后的异源数据进行差异巡检，当多个异源数据之间相似度在阈值条件范围内的，视为异源数据之间无差异，否则视为异源数据之间存在差异；本发明专利技术具有能够实现不同系统数据的共享，并对异源数据进行差异巡检，分辨出差异数据的有益效果，适用于数据处理领域。

【技术实现步骤摘要】
一种多系统差异数据巡检方法、系统和存储介质
本专利技术涉及数据处理的
，具体涉及一种多系统差异数据巡检方法、系统和存储介质。
技术介绍
目前，电网调控中心已经被定义为数据中心，接收多种电网实时数据采集系统(电网调度SCADA实时系统、电能实时采集系统等)的各类实时数据；由于现有的这些实时数据采集系统都有自己的应用环境及数据存储模式，导致电网调控中心存在多个数据库；这就造成系统彼此之间的数据不能交互共享，从而形成了多个不同的信息孤岛。因此，如何有效地将这些数据融合、处理，形成供用户人员参考的辅助决策，便成为了一种必然趋势。
技术实现思路
针对相关技术中存在的不足，本专利技术所要解决的技术问题在于：提供一种能够实现不同系统数据的共享，并对异源数据进行差异巡检，分辨出差异数据的多系统差异数据巡检方法及系统。为解决上述技术问题，本专利技术采用的技术方案为：一种多系统差异数据巡检方法，包括：S10,连接不同的实时数据采集系统，对各实时数据采集系统中的数据进行采集；S20,对采集的异源数据进行数据融合，将描述同一变量特征的异源数据归为一类；S30,按类对融合后的异源数据进行差异巡检，当多个异源数据之间相似度在阈值条件范围内的，视为异源数据之间无差异，否则视为异源数据之间存在差异。优选地，还包括：S40,将存在差异的异源数据进行展示，并发出预警信号。优选地，所述按类对融合后的异源数据进行差异巡检，当多个异源数据之间相似度在阈值条件范围内的，视为数据之间无差异，否则视为异源数据之间存在差异，具体包括：S401,定义时间长度为N的时间窗口；其中，所述时间窗口中包含的数据为多组异源数据；所述每组异源数据均为时间序列数据，所述的时间序列数据包括：时间戳和数据项；S402,在设定的时间窗口中,通过DTW算法对多组异源数据进行相似度度量计算；S403,如果时间窗口中任意两组数据之间的DTW距离值大于预先设定的阈值条件，则在该时间窗口内视为异源数据之间存在差异，否则，视为异源数据之间无差异。优选地，所述在设定的时间窗口中,通过DTW算法对多组异源数据进行相似度度量计算，具体包括：计算任意两组异源数据之间的距离，具体包括：对数据源X前i个采样点数据与数据源Y前j个采样点的相似性进行相似度计算；距离的计算方式如下：DX,Y(i,j)＝DistX,Y(i,j)+min{DX,Y(i-1,j),DX,Y(i,j-1),DX,Y(i-1,j-1)}；其中：X、Y表示描述时间窗口中包含的两组数据源；DistX,Y(i,j)表示数据源X中第i个采样点数据与数据源Y中第j个采样点数据之间的距离；DX,Y(i,j)表示两组异源数据X、Y落在时间窗口中固定数据点的DTW距离；i、j的取值均小于时间窗口长度N。优选地，所述时间窗口的窗口起点T1设定为：多组异源数据的统一接入时刻；所述时间窗口的窗口终点T2设定为：T1+N，且T1、T2均随着数据的采集时刻进行动态刷新。优选地，所述时间窗口的宽度设定为：两组异源数据的数据采集间隔的最小公倍数，且小于一天内数据的采样点数。本专利技术提供的一种多系统差异数据巡检系统，包括：数据采集模块，用于连接不同的实时数据采集系统，对各实时数据采集系统中的数据进行采集；数据整合模块，用于采集的异源数据进行数据融合，将描述同一变量特征的异源数据归为一类；差异数据巡检比对模块，用于按类对融合后的异源数据进行差异巡检，当多个异源数据之间相似度在阈值条件范围内的，视为异源数据之间无差异，否则视为异源数据之间存在差异。优选地，还包括：结果显示与预警模块，用于将存在差异的异源数据进行展示，并发出预警信号。本专利技术提供的存储介质，其中存储有多条指令，所述指令适于由处理器加载并执行如上所述的多系统差异数据巡检方法。本专利技术的有益技术效果在于：1、本专利技术在进行多系统差异数据巡检时，首先，将采集的不同实时数据采集系统中的数据进行数据融合，将描述同一变量特征的异源数据归为一类；以便后续数据的相似度计算；其次，按类对融合后的异源数据进行差异巡检，若多个异源数据之间相似度在阈值条件范围内的，视为异源数据之间无差异，否则视为异源数据之间存在差异；通过上述数据采集、数据融合、数据的差异巡检能够实现不同系统数据的共享，能够对不同实时数据采集系统中，同一电气量数据差异的检测，分辨出某一电气量的差异数据，并通过将差异进行展示、预警的方式，为工作人员的后续操作，提供了辅助决策手段，进而提高电网调度数据质量，实用性极强。2、本专利技术中，采用了DTW算法通过对两组数据之间的DTW距离值进行计算，并将任意两组数据之间的DTW距离值与预先设定的阈值条件进行比较，从而实现了对异源数据的相似度度量，使异源数据之间的序列相似性的度量更加精确。3、本专利技术中，采用两组数据的DTW距离值来描述数据临近点的数值与变化趋势的相似度，若两组异源数据在短时间内的值或变化趋势存在差异时，异源数据之间的DTW距离会有明显变化，其变化趋势表示一组数据正常刷新但另一组数据在一定时间内不刷新；如果时间窗口中的两组数据的DTW距离值大于预先设定的阈值条件，则将该两组数据视为在该时间窗口内存在差异，否则，可视为两组数据基本一致；本专利技术通过将多个系统的数据融合后进行计算，通过计算多组数据之间在预设时间内的相似度，用相似性度量值描述异源数据之间值的差异和变化趋势的差异，提高了差异数据查找的效率。附图说明图1是本专利技术实施例一提供的一种多系统差异数据巡检方法的流程示意图；图2是本专利技术实施例二提供的一种多系统差异数据巡检方法的流程示意图；图3是本专利技术实施例一提供的一种多系统差异数据巡检系统的结构示意图；图中：10为数据采集模块，20为数据整合模块，30为差异数据巡检比对模块，40为结果显示与预警模块,50为实时采集系统。具体实施方式为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术的一部分实施例，而不是全部的实施例；基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。其次，本专利技术结合示意图进行详细描述，在详述本专利技术实施例时，为便于说明，表示器件结构的剖面图会不依一般比例作局部放大，而且所述示意图只是示例，其在此不应限制本专利技术保护的范围。此外，在实际制作中应包含长度、宽度及深度的三维空间尺寸。以下结合附图详细说明所述一种多系统差异数据巡检方法及系统的一个实施例。实施例一图1是本专利技术实施例一提供的一种多系统差异数据巡检方法的流程示意图；如图1所示，一种多系统差异数据巡检方法，包括：S10,连接不同的实时数据采集系统，对各实时数据采本文档来自技高网...

【技术保护点】
1.一种多系统差异数据巡检方法，其特征在于：包括：/nS10,连接不同的实时数据采集系统，对各实时数据采集系统中的数据进行采集；/nS20,对采集的异源数据进行数据融合，将描述同一变量特征的异源数据归为一类；/nS30,按类对融合后的异源数据进行差异巡检，当多个异源数据之间相似度在阈值条件范围内的，视为异源数据之间无差异，否则视为异源数据之间存在差异。/n

【技术特征摘要】
1.一种多系统差异数据巡检方法，其特征在于：包括：
S10,连接不同的实时数据采集系统，对各实时数据采集系统中的数据进行采集；
S20,对采集的异源数据进行数据融合，将描述同一变量特征的异源数据归为一类；
S30,按类对融合后的异源数据进行差异巡检，当多个异源数据之间相似度在阈值条件范围内的，视为异源数据之间无差异，否则视为异源数据之间存在差异。


2.根据权利要求1所述的一种多系统差异数据巡检方法，其特征在于:还包括：
S40,将存在差异的异源数据进行展示，并发出预警信号。


3.根据权利要求1所述的一种多系统差异数据巡检方法，其特征在于:所述按类对融合后的异源数据进行差异巡检，当多个异源数据之间相似度在阈值条件范围内的，视为数据之间无差异，否则视为异源数据之间存在差异，具体包括：
S401,定义时间长度为N的时间窗口；其中，所述时间窗口中包含的数据为多组异源数据；所述每组异源数据均为时间序列数据，所述的时间序列数据包括：时间戳和数据项；
S402,在设定的时间窗口中,通过DTW算法对多组异源数据进行相似度度量计算；
S403,如果时间窗口中任意两组数据之间的DTW距离值大于预先设定的阈值条件，则在该时间窗口内视为异源数据之间存在差异，否则，视为异源数据之间无差异。


4.根据权利要求3所述的一种多系统差异数据巡检方法，其特征在于:所述在设定的时间窗口中,通过DTW算法对多组异源数据进行相似度度量计算，具体包括：
计算任意两组异源数据之间的距离，具体包括：对数据源X前i个采样点数据与数据源Y前j个采样点的相似性进行相似度计算；
距离的计算方式如下：
DX,Y(i,j)＝DistX,Y(i,j)+min{DX,Y(i-1,...

【专利技术属性】
技术研发人员：杨世宁，陈文刚，宰洪涛，姚泽龙，毛俊杰，马振军，王新瑞，郜涛，
申请(专利权)人：山西晟视汇智科技有限公司，国网山西省电力公司晋城供电公司，
类型：发明
国别省市：山西;14