【技术实现步骤摘要】
本专利技术涉及一种多元异构数据同步方法及系统,尤其涉及一种变电站监控系统多元异构数据同步方法及系统。
技术介绍
1、多元异构数据作为混合型数据集合,由不同类型、不同格式的数据组合而成,包括结构化数据和非结构化数据。考虑时间因素和存储模式对数据处理的影响,结构化数据可分为持久化存储和非持久化存储两种。对于新一代变电站监控系统而言,持久化存储的结构化数据一般指核心业务系统的模型数据,包括各类电网一二次设备名称、参数等,采用传统的关系型数据库系统进行存储和访问;非持久化存储的结构化数据一般指scada系统处理的实时数据,由于数据读写性能要求较高,多采用自研实时数据库或内存实时数据库进行存储。非结构化数据主要包括模型、图形、故障录波、历史日志等文件数据,一般都需要进行持久化存储,但考虑对处理时间的要求相对较低,一般通过分布式文件系统进行统一存储。
2、新一代变电站监控系统作为典型的分布式系统,主辅一体化监控主机和综合应用主机的实时数据库处理非持久化存储的结构化数据,关系数据库处理持久化存储的结构化数据,文件数据库处理持久化存储的非结
...【技术保护点】
1.一种变电站监控系统多元异构数据同步方法,其特征在于,包括:结构化数据同步和非结构化数据同步;结构化数据同步将同步源节点各应用调用的结构化数据处理接口进行统一封装,构建结构化同步数据缓存队列,通过分包模块向待同步节点发送结构化数据同步数据包,待同步节点接收到结构化数据同步数据包后进行组包处理,获得完整结构化同步数据后进行再次调用;非结构化数据同步将文件内容从关系数据库中剥离,文件内容统一存储在监控系统节点指定的磁盘目录中并通过非结构化数据同步方法进行多节点数据同步。
2.根据权利要求1所述的一种变电站监控系统多元异构数据同步方法,其特征在于,所述结构化数
...【技术特征摘要】
1.一种变电站监控系统多元异构数据同步方法,其特征在于,包括:结构化数据同步和非结构化数据同步;结构化数据同步将同步源节点各应用调用的结构化数据处理接口进行统一封装,构建结构化同步数据缓存队列,通过分包模块向待同步节点发送结构化数据同步数据包,待同步节点接收到结构化数据同步数据包后进行组包处理,获得完整结构化同步数据后进行再次调用;非结构化数据同步将文件内容从关系数据库中剥离,文件内容统一存储在监控系统节点指定的磁盘目录中并通过非结构化数据同步方法进行多节点数据同步。
2.根据权利要求1所述的一种变电站监控系统多元异构数据同步方法,其特征在于,所述结构化数据同步具体包括以下步骤:结构化同步数据封装;结构化同步数据缓存和结构化同步数据分、组包处理。
3.根据权利要求2所述的一种变电站监控系统多元异构数据同步方法,其特征在于,所述结构化数据同步包含待处理数据内容本身和处理该数据内容所调用的处理过程。
4.根据权利要求2所述的一种变电站监控系统多元异构数据同步方法,其特征在于,所述结构化数据同步用到的数据模型包括结构化数据处理函数和结构化数据输入参数,通过对结构化数据处理函数和输入参数的定义,将具体调用过程和数据封装成结构化数据同步数据包。
5.根据权利要求4所述的一种变电站监控系统多元异构数据同...
【专利技术属性】
技术研发人员:刁东宇,李照国,张婷,琚璐,刘泽晨,叶中玉,沈健,潘洪湘,
申请(专利权)人:国电南瑞南京控制系统有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。