数据管理方法和装置、存储介质及电子设备制造方法及图纸

本发明专利技术公开了一种数据管理方法和装置、存储介质及电子设备。其中，该方法包括：响应数据管理请求，在与目标生成时间戳对应的目标数据分片文件中，确定目标时序数据中待管理的目标元素数据的目标存储位置，其中，在目标数据分片文件中按照目标数据结构存储了包含目标生成时间戳的目标时间段内生成的时序数据，目标数据结构是用于对时序数据中的目标元素数据进行分类压缩存储的数据存储结构；对目标存储位置上存储的目标元素数据执行管理操作。本发明专利技术解决了由于海量的数据存储占用了很大的存储空间，使得数据管理操作的复杂度增加，从而导致数据管理效率降低的技术问题。导致数据管理效率降低的技术问题。导致数据管理效率降低的技术问题。

【技术实现步骤摘要】
数据管理方法和装置、存储介质及电子设备


[0001]本专利技术涉及计算机领域，具体而言，涉及一种数据管理方法和装置、存储介质及电子设备。

技术介绍

[0002]针对金融领域中海量的股票金融数据，目前常用的管理方式是借助数据库或外部文件来存储上述数据。但上述方式均存在一定缺陷：1)通过数据库存储管理股票金融数据。随着时间发展，越来越多的股票代码和交易日的数据需要被存储到数据库中，以便于数据管理。但由于数据体量的增大，将使得数据库的数据检索速度逐渐降低，访问数据库的时间大幅增加。而且实际上有很多股票代码和交易日的数据是冗余的；2)通过外部文件存储管理股票金融数据。但由于不同外部文件对应的各个平台间是不通用的，在需要使用某些股票金融数据时，就需要从不同的平台中分别读取，从而导致无法直接将上述数据量较大的股票金融数据加载至内存中使用。
[0003]也就是说，在相关技术提供的数据管理过程中，由于海量的数据存储占用了很大的存储空间，使得数据管理操作的复杂度增加，从而导致数据管理效率降低的问题。
[0004]针对上述的问题，目前尚未提出有效的解决方案。

技术实现思路

[0005]本专利技术实施例提供了一种数据管理方法和装置、存储介质及电子设备，以至少解决由于海量的数据存储占用了很大的存储空间，使得数据管理操作的复杂度增加，从而导致数据管理效率降低的技术问题。
[0006]根据本专利技术实施例的一个方面，提供了一种数据管理方法，包括：获取用于请求对目标时序数据执行管理操作的数据管理请求，其中，上述数据管理请求中携带有上述目标时序数据的数据类型标识符和上述目标时序数据的目标生成时间戳；响应上述数据管理请求，在与上述目标生成时间戳对应的目标数据分片文件中，确定上述目标时序数据中待管理的目标元素数据的目标存储位置，其中，在上述目标数据分片文件中按照目标数据结构存储了包含上述目标生成时间戳的目标时间段内生成的时序数据，上述目标数据结构是用于对上述时序数据中的目标元素数据进行分类压缩存储的数据存储结构；对上述目标存储位置上存储的上述目标元素数据执行管理操作。
[0007]根据本专利技术实施例的另一方面，还提供了一种数据管理装置，包括：第一获取单元，用于获取用于请求对目标时序数据执行管理操作的数据管理请求，其中，上述数据管理请求中携带有上述目标时序数据的数据类型标识符和上述目标时序数据的目标生成时间戳；第一确定单元，用于响应上述数据管理请求，在与上述目标生成时间戳对应的目标数据分片文件中，确定上述目标时序数据中待管理的目标元素数据的目标存储位置，其中，在上述目标数据分片文件中按照目标数据结构存储了包含上述目标生成时间戳的目标时间段内生成的时序数据，上述目标数据结构是用于对上述时序数据中的目标元素数据进行分类
压缩存储的数据存储结构；第一管理单元，用于对上述目标存储位置上存储的上述目标元素数据执行管理操作。
[0008]根据本专利技术实施例的又一方面，还提供了一种计算机可读的存储介质，该计算机可读的存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述的数据管理方法。
[0009]根据本专利技术实施例的又一方面，还提供了一种电子设备，包括存储器和处理器，上述存储器中存储有计算机程序，上述处理器被设置为通过上述计算机程序执行上述的数据管理方法。
[0010]在本专利技术实施例中，采用获取用于请求对目标时序数据执行管理操作的数据管理请求，其中，上述数据管理请求中携带有上述目标时序数据的数据类型标识符和上述目标时序数据的目标生成时间戳；响应上述数据管理请求，在与上述目标生成时间戳对应的目标数据分片文件中，确定上述目标时序数据中待管理的目标元素数据的目标存储位置，其中，在上述目标数据分片文件中按照目标数据结构存储了包含上述目标生成时间戳的目标时间段内生成的时序数据，上述目标数据结构是用于对上述时序数据中的目标元素数据进行分类压缩存储的数据存储结构；对上述目标存储位置上存储的上述目标元素数据执行管理操作的方式；通过目标时序数据的数据类型标识符和目标时序数据的目标生成时间戳，在目标数据分片文件中按照目标数据结构存储了包含目标生成时间戳的目标时间段内生成的时序数据，然后将上述时序数据中的元素数据处理为分类压缩存储的数据存储结构，达到了提高数据管理效率的目的，从而实现了减少数据存储空间，以及降低数据管理操作复杂度的技术效果，进而解决了由于海量的数据存储占用了很大的存储空间，使得数据管理操作的复杂度增加，从而导致数据管理效率降低的技术问题。
附图说明
[0011]此处所说明的附图用来提供对本专利技术的进一步理解，构成本申请的一部分，本专利技术的示意性实施例及其说明用于解释本专利技术，并不构成对本专利技术的不当限定。在附图中：
[0012]图1是根据本专利技术实施例的一种可选的数据管理方法的应用环境的示意图；
[0013]图2是根据本专利技术实施例的一种可选的数据管理方法的应用环境的示意图；
[0014]图3是根据本专利技术实施例的一种可选的数据管理方法的流程示意图；
[0015]图4是根据本专利技术实施例的一种可选的数据管理方法的数据压缩和解压过程示意图；
[0016]图5是根据本专利技术实施例的一种可选的数据管理方法的数据处理示意图；
[0017]图6是根据本专利技术实施例的另一种可选的数据管理方法的数据处理示意图；
[0018]图7是根据本专利技术实施例的又一种可选的数据管理方法的数据处理示意图；
[0019]图8是根据本专利技术实施例的另一种可选的数据管理方法的数据处理示意图；
[0020]图9是根据本专利技术实施例的一种可选的数据管理装置的结构示意图；
[0021]图10是根据本专利技术实施例的一种可选的电子设备的结构示意图。
具体实施方式
[0022]为了使本
的人员更好地理解本专利技术方案，下面将结合本专利技术实施例中的
附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分的实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本专利技术保护的范围。
[0023]需要说明的是，本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本专利技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
[0024]根据本专利技术实施例的一个方面，提供了一种数据管理方法，可选地，作为一种可选的实施方式，上述数据管理方法可以但不限于应用于如图1所示的应用环境中。该应用环境中包括：与用户本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据管理方法，其特征在于，包括：获取用于请求对目标时序数据执行管理操作的数据管理请求，其中，所述数据管理请求中携带有所述目标时序数据的数据类型标识符和所述目标时序数据的目标生成时间戳；响应所述数据管理请求，在与所述目标生成时间戳对应的目标数据分片文件中，确定所述目标时序数据中待管理的目标元素数据的目标存储位置，其中，在所述目标数据分片文件中按照目标数据结构存储了包含所述目标生成时间戳的目标时间段内生成的时序数据，所述目标数据结构是用于对所述时序数据中的目标元素数据进行分类压缩存储的数据存储结构；对所述目标存储位置上存储的所述目标元素数据执行管理操作。2.根据权利要求1所述的方法，其特征在于，所述在与所述目标生成时间戳对应的目标数据分片文件中，确定所述目标时序数据中待管理的目标元素数据的目标存储位置包括：在所述目标数据分片文件存储的数据矩阵中，确定包含所述数据类型标识符和所述目标元素数据中记录的属性特征对应的特征类别标识符的数据行的行位置标签；获取所述目标生成时间戳和与所述目标时间段匹配的参考时间戳之间的时序关系；在所述目标数据分片文件存储的数据矩阵中，根据所述时序关系确定所述目标时序数据所在位置的列位置标签；将所述行位置标签和所述列位置标签所指示的位置，确定为所述目标元素数据所在的所述目标存储位置。3.根据权利要求1所述的方法，其特征在于，在所述获取用于请求对目标时序数据执行管理操作的数据管理请求之前，还包括：获取携带有生成时间戳的时序数据，其中，所述时序数据包括所述目标时序数据；按照所述生成时间戳所在时间段对所述时序数据进行分组，得到多组时序数据，其中，每一组所述时序数据中包括多个对象时序数据；对每一组所述时序数据，按照所述目标数据结构依次提取每个所述对象时序数据中的时序元素数据和属性元素数据，并对所述时序元素数据和所述属性元素数据进行分类压缩存储，以得到一组所述时序数据对应的数据分片文件。4.根据权利要求3所述的方法，其特征在于，在所述按照所述目标数据结构依次提取每个所述对象时序数据中的时序元素数据和属性元素数据之后，还包括：获取所述时序元素数据中记录的对象生成时间戳，和所述对象生成时间戳所在时间段匹配的对象参考时间戳之间的对象时序关系；根据所述对象时序关系确定所述时序元素数据对应的时序标识符；遍历所述属性元素数据，依次执行以下操作：确定待处理的当前属性元素数据；在所述当前属性元素数据用于指示所述对象时序数据的数据类型的情况下，将所述当前属性元素数据映射为对应的数据类型标识符；在所述当前属性元素数据用于指示所述对象时序数据的属性特征的情况下，将所述属性特征中的各个特征类别分别映射为对应的特征类别标识符；利...

【专利技术属性】
技术研发人员：曾加，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：