一种数据存储方法、系统、电子设备及计算机可读存储介质技术方案

本发明专利技术的实施例提供了一种数据存储方法、系统、电子设备及计算机可读存储介质，所述方法包括：将数据存储至数据库之前，中间件将数据根据数据模板派生为目标数据；基于中间件检测目标数据是否满足预设条件；若是，则将目标数据存储至数据库中。在数据存储至数据库之前，基于数据模板派生为目标数据，无需将自定义数据转换为数据库可以存储的格式，缩短开发时间，并且中间件检测目标数据是否满足预设条件。在入库数据的数量激增的情况下，在数据入库之前，检测数据是否满足预设条件，将满足预设条件的数据存入数据库中，从而避免大量数据入库，导致入库延迟的情况发生。导致入库延迟的情况发生。导致入库延迟的情况发生。

【技术实现步骤摘要】
一种数据存储方法、系统、电子设备及计算机可读存储介质


[0001]本专利技术涉及数据存储领域，具体而言，涉及一种数据存储方法、系统、电子设备及计算机可读存储介质。

技术介绍

[0002]现有的数据存储方式，实时入库时，当同时入库的数据量激增时，会产生明显延迟。
[0003]并且现有的分布式的高速缓存系统，在需要对数据存储的情况下，需要将自定义数据类型，统一转化为分布式的高速缓存系统支持的固定数据类型。又例如，针对现有技术中的redis缓存模块，在对每次新的数据进行缓存时，需要手动在代码中将数据转换为redis缓存模块的默认格式，才可以将数据缓存至数据库中，从而延长开发时间。

技术实现思路

[0004]本专利技术的目的在于提供一种数据存储方法、系统、电子设备及计算机可读存储介质，能够在入库数据激增时，不会出现延迟并且数据入库无需开发时间。
[0005]为了实现上述目的，本申请实施例采用的技术方案如下：
[0006]第一方面，本申请实施例提供了一种数据存储方法，应用于数据存储系统，所述数据存储系统包括中间件和数据库，所述方法包括：
[0007]在将数据存储至所述数据库之前，所述中间件将所述数据根据数据模板派生为目标数据；
[0008]基于所述中间件检测目标数据是否满足预设条件；
[0009]若是，则将所述目标数据存储至数据库中。
[0010]在可选的实施方式中，所述基于所述中间件检测目标数据是否满足预设条件的步骤，包括：
[0011]基于所述目标数据生成数据队列；
[0012]判断数据队列中的目标数据的数量是否大于预设阈值；
[0013]在所述数量大于预设阈值的情况下，确定所述目标数据满足预设条件。
[0014]在可选的实施方式中，所述基于所述中间件检测目标数据是否满足预设条件的步骤，包括：
[0015]基于所述目标数据生成数据队列；
[0016]按照预设周期对所述数据队列进行检测；
[0017]在检测到所述数据队列存在目标数据的情况下，确定所述目标数据满足预设条件。
[0018]在可选的实施方式中，所述基于所述目标数据生成数据队列的步骤，包括：
[0019]确定所述目标数据的业务类型和操作类型；
[0020]依据所述业务类型，将所述目标数据分成不同数据队列，其中，不同数据列队对应
不同业务类型；
[0021]所述方法还包括：
[0022]基于所述数据队列、所述业务类型以及所述操作类型，生成所述目标数据的结点信息。
[0023]在可选的实施方式中，所述方法还包括：
[0024]将所述结点信息作为索引，在所述中间件中搜索与所述结点信息对应的数据。
[0025]在可选的实施方式中，所述基于所述中间件检测目标数据是否满足预设条件的步骤，包括：
[0026]检测所述中间件是否发生宕机；
[0027]在所述中间件发生宕机的情况下，获取所述中间件中存储的数据，并确定获取的所述目标数据满足预设条件。
[0028]第二方面，本申请实施例提供了一种数据存储系统，所述数据存储系统包括中间件和数据库；
[0029]所述中间件用于：在将数据存储至所述数据库之前，将所述数据根据数据模板派生为目标数据；
[0030]检测目标数据是否满足预设条件；
[0031]若是，则将所述目标数据存储至数据库中。
[0032]第三方面，本申请实施例提供了一种电子设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现所述数据存储方法的步骤。
[0033]第四方面，本申请实施例提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现所述数据存储方法的步骤。
[0034]本申请具有以下有益效果：
[0035]本申请通过在将数据存储至数据库之前，中间件将数据根据数据模板派生为目标数据；基于中间件检测目标数据是否满足预设条件；若是，则将目标数据存储至数据库中。在数据存储至数据库之前，基于数据模板派生为目标数据，无需将自定义数据转换为数据库可以存储的格式，缩短开发时间，并且中间件检测目标数据是否满足预设条件。在入库数据的数量激增的情况下，在数据入库之前，检测数据是否满足预设条件，将满足预设条件的数据存入数据库中，从而避免大量数据入库，导致入库延迟的情况发生。
附图说明
[0036]为了更清楚地说明本专利技术实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本专利技术的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
[0037]图1为本专利技术实施例提供的电子设备的方框示意图；
[0038]图2为本专利技术实施例提供的一种数据存储方法的步骤流程图之一；
[0039]图3为本专利技术实施例提供的一种数据存储方法的步骤流程图之二；
[0040]图4为本专利技术实施例提供的一种数据存储方法的步骤流程图之三；
[0041]图5为本专利技术实施例提供的一种数据存储方法的步骤流程图之四；
[0042]图6为本专利技术实施例提供的一种数据存储系统的结构框图。
具体实施方式
[0043]为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本专利技术实施例的组件可以以各种不同的配置来布置和设计。
[0044]因此，以下对在附图中提供的本专利技术的实施例的详细描述并非旨在限制要求保护的本专利技术的范围，而是仅仅表示本专利技术的选定实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0045]应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。
[0046]在本专利技术的描述中，需要说明的是，若出现术语“上”、“下”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，或者是该专利技术产品使用时惯常摆放的方位或位置关系，仅是为了便于描述本专利技术和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本专利技术的限制。
[0047]此外，若出现术语“第一”、“第二”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
[0048]在本申请的描述中，还需要说明的是，除非另有明确的规定和限定，术语“设置”、“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据存储方法，应用于数据存储系统，其特征在于，所述数据存储系统包括中间件和数据库，所述方法包括：在将数据存储至所述数据库之前，所述中间件将所述数据根据数据模板派生为目标数据；基于所述中间件检测目标数据是否满足预设条件；若是，则将所述目标数据存储至数据库中。2.根据权利要求1所述的方法，其特征在于，所述基于所述中间件检测目标数据是否满足预设条件的步骤，包括：基于所述目标数据生成数据队列；判断数据队列中的目标数据的数量是否大于预设阈值；在所述数量大于预设阈值的情况下，确定所述目标数据满足预设条件。3.根据权利要求1所述的方法，其特征在于，所述基于所述中间件检测目标数据是否满足预设条件的步骤，包括：基于所述目标数据生成数据队列；按照预设周期对所述数据队列进行检测；在检测到所述数据队列存在目标数据的情况下，确定所述目标数据满足预设条件。4.根据权利要求2所述的方法，其特征在于，所述基于所述目标数据生成数据队列的步骤，包括：确定所述目标数据的业务类型和操作类型；依据所述业务类型，将所述目标数据分成不同数据队列，其中，不同数据列队对应不同业务类型；所述方法还包括：基于所述数据队列、所述业务类型以及所述操作类型，生成所述目标数据的结点信息。5.根据权利要求4所述的方法，其特征在于，所述方法还包括：将所述结点信息作为...

【专利技术属性】
技术研发人员：刘璐，
申请(专利权)人：北京像素软件科技股份有限公司，
类型：发明
国别省市：