一种数据存储系统、方法、装置、设备及存储介质制造方法及图纸

技术编号:36264556 阅读:13 留言:0更新日期:2023-01-07 10:03
本发明专利技术公开了一种数据存储系统、方法、装置、设备及存储介质,该系统包括:业务服务器、第一存储服务器和应用服务器;业务服务器,用于基于接收到的价值凭证领取指令中的用户标识和价值凭证数据,生成价值凭证领取数据,并将价值凭证领取数据同步到数据队列和第一存储服务器中;第一存储服务器,用于存储价值凭证领取数据;基于接收到的数据拉取指令,将至少一个已存储的价值凭证领取数据发送给应用服务器;应用服务器,用于存储定时从数据队列中获取到的价值凭证领取数据;在满足预设拉取条件时,向第一存储服务器发送数据拉取指令,并将第一存储服务器发送的各价值凭证领取数据存储在本地存储模块中。本发明专利技术实施例解决了数据丢失的问题。数据丢失的问题。数据丢失的问题。

【技术实现步骤摘要】
一种数据存储系统、方法、装置、设备及存储介质


[0001]本专利技术涉及数据处理
,尤其涉及一种数据存储系统、方法、装置、设备及存储介质。

技术介绍

[0002]在互联网业务中,优惠券是一种常见的促销手段,可提高下单量。目前,价值凭证领取数据通常被存储在数据库(Database,DB)服务器或缓存服务器中。当用户浏览商品时,应用服务器需要采用远程过程调用(Remote Procedure Call,RPC)技术,通过数据库服务器或缓存服务器提供的价值凭证查询接口,对与该用户关联的价值凭证领取数据进行查询,并将返回的查询结果进行展示。
[0003]在实现本专利技术的过程中,发现现有技术中至少存在以下技术问题:
[0004]在高并发查询场景下,查询价值凭证领取数据的瞬间访问流量可能达到千万级别,而数据库服务器或缓存服务器均无法支撑高并发查询场景下的流量访问要求。但如果将价值凭证领取数据直接存储在应用服务器的本地缓存中,则会占用应用服务器的大量线程资源,并且受到应用服务器的性能限制,在数据同步时容易出现价值凭证领取数据丢失的情况。

技术实现思路

[0005]本专利技术实施例提供了一种数据存储系统、方法、装置、设备及存储介质,以解决价值凭证领取数据同步到应用服务器时占用大量线程资源和数据同步时存在的数据丢失的问题,在满足高并发查询场景下的数据访问要求的情况下,保证应用服务器同步数据的时效性和完整性。
[0006]根据本专利技术一个实施例提供了一种数据存储系统,该系统包括:业务服务器、第一存储服务器和应用服务器;
[0007]其中,业务服务器,用于响应于检测到价值凭证领取指令,基于价值凭证领取指令中的用户标识和价值凭证数据,生成价值凭证领取数据,并将价值凭证领取数据同步到数据队列和第一存储服务器中;
[0008]第一存储服务器,用于将接收到的价值凭证领取数据存储在本地存储模块中;以及,基于接收到应用服务器发送的数据拉取指令,将至少一个已存储的价值凭证领取数据发送给应用服务器;
[0009]应用服务器,用于定时从数据队列获取价值凭证领取数据,并将从数据队列中获取到的价值凭证领取数据存储在本地存储模块中;以及,在满足预设拉取条件时,向第一存储服务器发送数据拉取指令,并将第一存储服务器发送的各价值凭证领取数据存储在本地存储模块中。
[0010]根据本专利技术另一个实施例提供了一种数据存储方法,该方法包括:
[0011]定时从数据队列中获取价值凭证数据,并将从数据队列中获取到的价值凭证领取
数据存储在本地存储模块中;
[0012]在满足预设拉取条件时,向第一存储服务器发送数据拉取指令,并将接收到的第一存储服务器发送的至少一个已存储的价值凭证领取数据存储在本地存储模块中;
[0013]其中,价值凭证领取数据是业务服务器响应于检测到价值凭证领取指令,基于价值凭证领取指令中的用户标识和价值凭证数据生成,并同步到数据队列和第一存储服务器中的。
[0014]根据本专利技术另一个实施例提供了一种应用服务器,该应用服务器包括:
[0015]至少一个处理器;以及
[0016]与至少一个处理器通信连接的存储器;其中,
[0017]存储器存储有可被至少一个处理器执行的计算机程序,计算机程序被至少一个处理器执行,以使至少一个处理器能够执行本专利技术任一实施例的数据存储方法。
[0018]根据本专利技术另一个实施例,提供了一种计算机可读存储介质,计算机可读存储介质存储有计算机指令,计算机指令用于使处理器执行时实现本专利技术任一实施例的数据存储方法。
[0019]本专利技术实施例的技术方案,通过在数据存储系统中设置应用服务器,业务服务器在基于价值凭证领取指令中的用户标识和价值凭证数据,生成价值凭证领取数据后,将价值凭证领取数据同步到数据队列和第一存储服务器中,应用服务器将定时从数据队列中获取到的价值凭证领取数据存储在本地存储模块中,避免了高并发存储场景下占用应用服务器大量线程资源的情况。进一步地,通过应用服务器在满足预设拉取条件时,向第一存储服务器发送数据拉取指令,接收第一存储服务器基于接收到的数据拉取指令发送的已存储的各价值凭证领取数据,并将各价值凭证领取数据存储在本地存储模块中,解决了应用服务器在数据同步时存在的数据丢失的问题,从应用服务器同步数据的时效性维度和完整性维度,保证了应用服务器的本地存储模块中存储的价值凭证领取数据可以满足高并发查询场景下的数据查询要求。
[0020]应当理解,本部分所描述的内容并非旨在标识本专利技术的实施例的关键或重要特征,也不用于限制本专利技术的范围。本专利技术的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0021]为了更清楚地说明本专利技术实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本专利技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0022]图1为本专利技术一个实施例所提供的一种数据存储系统的结构示意图;
[0023]图2为本专利技术一个实施例所提供的另一种数据存储系统的结构示意图;
[0024]图3为本专利技术一个实施例所提供的一种数据存储系统的原理图;
[0025]图4为本专利技术一个实施例所提供的一种数据存储方法的流程图;
[0026]图5为本专利技术一个实施例所提供的一种数据存储装置的结构示意图;
[0027]图6为本专利技术一个实施例所提供的一种应用服务器的结构示意图。
具体实施方式
[0028]为了使本
的人员更好地理解本专利技术方案,下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分的实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本专利技术保护的范围。
[0029]需要说明的是,本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本专利技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
[0030]图1为本专利技术一个实施例所提供的一种数据存储系统的结构示意图,本实施例可适用于对价值凭证领取数据进行存储的情况,该系统可以为本专利技术下述实施例提供的数据存储方法提供服务,并且数据存储系统中的应用服务器可配置下述实施例提供的数据存储装置,该装置可以采用硬件和/或软件的形式实现。
[0031]如图1所示,该数据存储本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据存储系统,其特征在于,包括:业务服务器、第一存储服务器和应用服务器;其中,所述业务服务器,用于响应于检测到价值凭证领取指令,基于所述价值凭证领取指令中的用户标识和价值凭证数据,生成价值凭证领取数据,并将所述价值凭证领取数据同步到数据队列和所述第一存储服务器中;所述第一存储服务器,用于将接收到的所述价值凭证领取数据存储在本地存储模块中;以及,基于接收到所述应用服务器发送的数据拉取指令,将至少一个已存储的价值凭证领取数据发送给所述应用服务器;所述应用服务器,用于定时从所述数据队列获取所述价值凭证领取数据,并将从所述数据队列中获取到的价值凭证领取数据存储在本地存储模块中;以及,在满足预设拉取条件时,向所述第一存储服务器发送数据拉取指令,并将所述第一存储服务器发送的各价值凭证领取数据存储在本地存储模块中。2.根据权利要求1所述的系统,其特征在于,所述预设拉取条件包括:检测到所述应用服务器的重启指令和/或预设拉取周期,相应的,所述应用服务器,具体用于:当检测到所述应用服务器的重启指令时,将生成的数据拉取指令发送给所述第一存储服务器,并将所述第一存储服务器发送的全量的价值凭证领取数据存储在本地存储模块中;和/或,在满足预设拉取周期时,将基于所述预设拉取周期生成的数据拉取指令发送给所述第一存储服务器,并将所述第一存储服务器基于所述数据拉取指令中的预设拉取周期发送的至少一个价值凭证领取数据存储在本地存储模块中。3.根据权利要求2所述的系统,其特征在于,所述应用服务器,还用于:在将所述第一存储服务器发送的各价值凭证领取数据存储在本地存储模块中之后,将本地存储模块中存储的与所述数据拉取指令对应的本地存储数据进行删除;其中,所述本地存储数据为本地存储模块中存储的全量的价值凭证领取数据,和/或,所述本地存储数据为从数据队列中获取到的与所述预设拉取周期对应的价值凭证领取数据。4.根据权利要求1所述的系统,其特征在于,所述应用服务器,具体用于:采用预设压缩算法,对接收到的所述第一存储服务器发送的至少一个价值凭证领取数据分别执行压缩操作,并将压缩后的各价值凭证领取数据分别存储在本地存储模块中;其中,所述预设压缩算法对应的压缩结构为键值对压缩结构。5.根据权利要求4所述的系统,其特征在于,所述预设压缩算法包括布隆过滤器,相应的,所述应用服务器,还用于:响应于检测到凭证查询指令,获取所述凭证查询指令中的目标用户标识,并基于所述目标用户标识,确定是否存在与所述目标用户标识对应的目标价值凭证数据;如果存在,则判断所述目标价值凭证数据是否属于压缩后的价值凭证领取数据;如果所述目标价值凭证数据属于压缩后的价值凭证领取数据,则采用远程过程调用技术,查询所述第一存储服务器的本地存储模块中是否存在与所述目标用户标识对应的目标价值凭证数据,并将所述第一存储服务器返回的目标查询结果进行展示。6.根据权利要求1所述的系统,其特征在于,所述业务服务器,具体用于:获取所述第一存储服务器对应的存储日志数据,将所述存储日志数据中的价值凭证领取数据同步到数据队列中;或者,
基于预设查询周期,对所述第一存储服务器执行查询操作,并将接收到的所述第一存储服务器返回的价值凭证领取数据同步到数据队列中。7.根据权利要求1所述的系统,其特征在于,所述系统还包括凭证生产服务器,所述凭证生产服务器,用于将创建的至少一个价值凭证数据发送给所述业务服务器;其中,所述价值凭证数据包括至少一个价值凭证标识以及与各所述价值凭证标识分别对应的凭证详情数据。8.根据权利要求7所述的系统,其特征在于,所述系统还包括第二存储服务器,所述第二存储服务器,用于将接收到的所述凭证生产服务器发...

【专利技术属性】
技术研发人员:黄增荣
申请(专利权)人:京东科技控股股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1