数据管理方法和装置制造方法及图纸

本公开提供一种数据管理方法和装置。数据管理装置采集能源互联网数据，将能源互联网数据进行解析处理，以得到具有预定格式的信息，将信息按照预定维度进行统计，以得到相应的能源数据和信息数据，将信息数据写入信息数据存储单元中，将能源数据写入相对应的能源数据存储主单元中，以便能源数据存储主单元将接收到的能源数据写入相关联的能源数据存储从单元中。本公开通过利用分布式存储技术，有效解决能源信息系统并发少、数据存储受限、数据查询效率低下、不能满足能源互联网精细化数据存储需求的问题。

【技术实现步骤摘要】
数据管理方法和装置
本公开涉及信息存储领域，特别涉及一种数据管理方法和装置。
技术介绍
在能源系统中，数据采集、数据解析、数据统计存储是基本功能。数据采集单元负责采集设备UIPQ能源数据、环境数据、状态数据等，以字节流格式传输至数据解析单元。数据解析单元负责接收数据采集单元的字节流数据，对数据进行解析处理，再以预定格式将相应字符发送给数据统计存储单元。数据统计存储单元负责按设备、层级维度及日、月、年时间维度统计数据，再存储至数据库。
技术实现思路
专利技术人经过研究发现，相关技术中的数据存储系统架构简单，适用单一工程监控。在工程监控数量、采集的数据量剧增的情况下，数据存储性能会显著降低。为此，本公开提供一种提升能源互联网数据存储性能的方案。根据本公开实施例的第一方面，提供一种数据管理方法，包括：采集能源互联网数据；将所述能源互联网数据进行解析处理，以得到具有预定格式的信息；将所述信息按照预定维度进行统计，以得到相应的能源数据和信息数据；将所述信息数据写入信息数据存储单元中；将所述能源数据写入相对应的能源数据存储主单元中，以便所述能源数据存储主单元将接收到的所述能源数据写入相关联的能源数据存储从单元中。在一些实施例中，将所述能源数据写入相对应的能源数据存储主单元中包括：检测各能源数据存储主单元的当前存储状态；将所述能源数据写入当前存储空间最大的能源数据存储主单元中。在一些实施例中，在接收到读取指定能源数据的指令后，查询所述指定能源数据的属性；在所述指定能源数据为实时数据的情况下，从具有所述指定能源数据的能源数据存储主单元中读取所述指定能源数据。在一些实施例中，在所述指定能源数据为历史数据的情况下，从具有所述指定能源数据的能源数据存储从单元中读取所述指定能源数据。在一些实施例中，在接收到读取指定信息数据的指令后，从所述信息数据存储单元中读取所述指定信息数据。在一些实施例中，检测各能源数据存储主单元的工作状态；若存在出现故障的能源数据存储主单元，则将与所述出现故障的能源数据存储主单元相关联的能源数据存储从单元切换为能源数据存储主单元。在一些实施例中，在所述出现故障的能源数据存储主单元故障恢复后，将故障恢复的能源数据存储主单元切换为能源数据存储从单元。根据本公开实施例的第二方面，提供一种数据管理装置，包括：数据采集模块，被配置为采集能源互联网数据；数据解析模块，被配置为将所述能源互联网数据进行解析处理，以得到具有预定格式的信息；数据统计模块，被配置为将所述信息按照预定维度进行统计，以得到相应的能源数据和信息数据；数据存储模块，被配置为将所述信息数据写入信息数据存储单元中，将所述能源数据写入相对应的能源数据存储主单元中，以便所述能源数据存储主单元将接收到的所述能源数据写入相关联的能源数据存储从单元中。在一些实施例中，所述数据存储模块包括：数据管理模块，被配置为检测各能源数据存储主单元的当前存储状态，将所述能源数据写入当前存储空间最大的能源数据存储主单元中。在一些实施例中，数据管理模块还被配置为在接收到读取指定能源数据的指令后，查询所述指定能源数据的属性，在所述指定能源数据为实时数据的情况下，从具有所述指定能源数据的能源数据存储主单元中读取所述指定能源数据。在一些实施例中，数据管理模块还被配置为在所述指定能源数据为历史数据的情况下，从具有所述指定能源数据的能源数据存储从单元中读取所述指定能源数据。在一些实施例中，数据管理模块还被配置为在接收到读取指定信息数据的指令后，从所述信息数据存储单元中读取所述指定信息数据。在一些实施例中，所述数据存储模块包括：单元控制模块，被配置为检测各能源数据存储主单元的工作状态，若存在出现故障的能源数据存储主单元，则将与所述出现故障的能源数据存储主单元相关联的能源数据存储从单元切换为能源数据存储主单元。在一些实施例中，单元控制模块还被配置为在所述出现故障的能源数据存储主单元故障恢复后，将故障恢复的能源数据存储主单元切换为能源数据存储从单元。根据本公开实施例的第三方面，提供一种数据管理装置，包括：存储器，被配置为存储指令；处理器，耦合到存储器，处理器被配置为基于存储器存储的指令执行实现如上述任一实施例所述的方法。根据本公开实施例的第四方面，提供一种计算机可读存储介质，其中，计算机可读存储介质存储有计算机指令，指令被处理器执行时实现如上述任一实施例所述的方法。通过以下参照附图对本公开的示例性实施例的详细描述，本公开的其它特征及其优点将会变得清楚。附图说明为了更清楚地说明本公开实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。图1为本公开一个实施例的数据管理方法的流程示意图；图2为本公开另一个实施例的数据管理方法的流程示意图；图3为本公开一个实施例的数据管理装置的结构示意图；图4为本公开一个实施例的数据存储模块的结构示意图；图5为本公开另一个实施例的数据管理装置的结构示意图。具体实施方式下面将结合本公开实施例中的附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。以下对至少一个示例性实施例的描述实际上仅仅是说明性的，决不作为对本公开及其应用或使用的任何限制。基于本公开中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本公开保护的范围。除非另外具体说明，否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本公开的范围。同时，应当明白，为了便于描述，附图中所示出的各个部分的尺寸并不是按照实际的比例关系绘制的。对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论，但在适当情况下，所述技术、方法和设备应当被视为授权说明书的一部分。在这里示出和讨论的所有示例中，任何具体值应被解释为仅仅是示例性的，而不是作为限制。因此，示例性实施例的其它示例可以具有不同的值。应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步讨论。图1为本公开一个实施例的数据管理方法的流程示意图。在一些实施例中，数据管理方法步骤由数据管理装置执行。在步骤101，采集能源互联网数据。这里需要说明的是，由于如何采集能源互联网数据并不是本公开的专利技术点所在，因此这里不展开说明。在步骤102，将能源互联网数据进行解析处理，以得到具有预定格式的信息。在一些实施例中，利用json格式来表示经过解析处理的信息。例如：在步骤103，将信息按照预定维度进行统计，以得到相应的能源数据和信息数据。在一些实施例中，按照设备、层级维度以及日、月、年时间维度进行数据统计。在步骤104，将信息数据写入信息数据存储单元中。在步骤105，将能源数据写入相对应的能源数据存储主单元中，以便能源数据存储主单元将接收到的能源数据写入相关联的能源数据存储从单元中。在一些实施例中，将能源数据写入相对应的能源数据存储主单元中包括：检测各能源数据存储主单元的当前存储状态，将能源数据写入当前存储空间最本文档来自技高网...

【技术保护点】
1.一种数据管理方法，包括：采集能源互联网数据；将所述能源互联网数据进行解析处理，以得到具有预定格式的信息；将所述信息按照预定维度进行统计，以得到相应的能源数据和信息数据；将所述信息数据写入信息数据存储单元中；将所述能源数据写入相对应的能源数据存储主单元中，以便所述能源数据存储主单元将接收到的所述能源数据写入相关联的能源数据存储从单元中。

【技术特征摘要】
1.一种数据管理方法，包括：采集能源互联网数据；将所述能源互联网数据进行解析处理，以得到具有预定格式的信息；将所述信息按照预定维度进行统计，以得到相应的能源数据和信息数据；将所述信息数据写入信息数据存储单元中；将所述能源数据写入相对应的能源数据存储主单元中，以便所述能源数据存储主单元将接收到的所述能源数据写入相关联的能源数据存储从单元中。2.根据权利要求1所述的方法，其中，将所述能源数据写入相对应的能源数据存储主单元中包括：检测各能源数据存储主单元的当前存储状态；将所述能源数据写入当前存储空间最大的能源数据存储主单元中。3.根据权利要求1所述的方法，还包括：在接收到读取指定能源数据的指令后，查询所述指定能源数据的属性；在所述指定能源数据为实时数据的情况下，从具有所述指定能源数据的能源数据存储主单元中读取所述指定能源数据。4.根据权利要求3所述的方法，还包括：在所述指定能源数据为历史数据的情况下，从具有所述指定能源数据的能源数据存储从单元中读取所述指定能源数据。5.根据权利要求1所述的方法，还包括：在接收到读取指定信息数据的指令后，从所述信息数据存储单元中读取所述指定信息数据。6.根据权利要求1-5中任一项所述的方法，还包括：检测各能源数据存储主单元的工作状态；若存在出现故障的能源数据存储主单元，则将与所述出现故障的能源数据存储主单元相关联的能源数据存储从单元切换为能源数据存储主单元。7.根据权利要求6所述的方法，还包括：在所述出现故障的能源数据存储主单元故障恢复后，将故障恢复的能源数据存储主单元切换为能源数据存储从单元。8.一种数据管理装置，包括：数据采集模块，被配置为采集能源互联网数据；数据解析模块，被配置为将所述能源互联网数据进行解析处理，以得到具有预定格式的信息；数据统计模块，被配置为将所述信息按照预定维度进行统计，以得到相应的能源数据和信息数据；数据存储模...

【专利技术属性】
技术研发人员：罗晓，王敉佳，王灵军，赵新宇，黄泽鑫，
申请(专利权)人：珠海格力电器股份有限公司，
类型：发明
国别省市：广东,44