System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 数据处理方法、装置、设备及存储介质制造方法及图纸_技高网

数据处理方法、装置、设备及存储介质制造方法及图纸

技术编号:40318246 阅读:5 留言:0更新日期:2024-02-07 21:01
本公开提供了一种数据处理方法、装置、设备及存储介质,可以应用于计算机技术领域和金融科技领域。该方法包括:响应于接收到数据缓存请求,基于所述数据缓存请求包括的待缓存数据的数据权重,确定目标数据权重,其中,所述数据权重表征所述待缓存数据的重要程度;基于所述目标数据权重和索引队列优先级排序结果,从多个索引队列中确定第一目标索引队列,其中,所述索引队列优先级排序结果是按照优先级对所述多个索引队列排序得到的;基于所述待缓存数据,确定所述待缓存数据的待缓存数据索引;将所述待缓存数据索引存储至所述第一目标索引队列中;以及将所述待缓存数据存储至缓存空间中。

【技术实现步骤摘要】

本公开涉及计算机和金融科技领域,尤其涉及一种数据处理方法、装置、设备、介质和程序产品。


技术介绍

1、缓存技术是指计算机系统中将热点数据存储在具有更低访问延迟的高速存储器中,当请求调用缓存数据时,响应耗时将大大缩短。在进行缓存数据存储时,通常为按照存储时间将缓存数据直接存储至高速存储器中,在高速存储器存满时,通常需要一定策略选择把高速存储器内的某些数据淘汰出去。

2、在实现本公开构思的过程中,专利技术人发现相关技术中至少存在如下问题:在进行缓存数据存储时,通常为按照存储时间将存储数据直接存储至高速存储器中,无法区分数据是否重要,可能存在对于重要数据的误删问题。


技术实现思路

1、鉴于上述问题,本公开提供了一种数据处理方法、装置、设备、介质和程序产品。

2、根据本公开的第一个方面,提供了一种数据处理方法,包括:响应于接收到数据缓存请求,基于上述数据缓存请求包括的待缓存数据的数据权重,确定目标数据权重,其中,上述数据权重表征上述待缓存数据的重要程度;基于上述目标数据权重和索引队列优先级排序结果,从多个索引队列中确定第一目标索引队列,其中,上述索引队列优先级排序结果是按照优先级对上述多个索引队列排序得到的;基于上述待缓存数据,确定上述待缓存数据的待缓存数据索引;将上述待缓存数据索引存储至上述第一目标索引队列中;以及将上述待缓存数据存储至缓存空间中。

3、根据本公开的实施例,上述方法还包括:响应于数据删除指令,基于上述索引队列优先级排序结果,从上述多个索引队列中,确定第二目标索引队列,其中,上述第二目标索引队列为优先级最低的索引队列;从上述第二目标索引队列包括的多个数据索引中,确定待删除数据索引;将与上述待删除数据索引对应的待删除数据从上述缓存空间中删除;以及将上述待删除数据索引从上述第二目标索引队列中删除。还包括:确定上述待缓存数据的第一数据量;在上述缓存空间的可用存储容量小于上述第一数据量的情况下,生成上述数据删除指令。

4、根据本公开的实施例,上述第二目标索引队列包括的多个数据索引各自的使用属性;其中,上述从上述第二目标索引队列包括的多个数据索引中,确定待删除数据索引,包括:基于上述第二目标索引队列包括的多个数据索引的使用属性,确定第一初始待删除数据索引;从上述存储空间中确定与第一初始待删除数据索引对应的第一初始待删除数据的第二数据量;将上述第二数据量与上述可用存储容量之和,与上述第一数据量进行比对,得到第一比对结果;在上述第一比对结果表征上述第二数据量与上述可用存储容量之和大于或等于上述第一数据量的情况下,将上述第一初始待删除数据索引作为待删除数据索引;其中,使用属性包括上述数据索引的使用频次、最近使用时间以及与上述数据索引对应的目标数据权重。

5、根据本公开的实施例,上述方法还包括:在上述第一比对结果表征上述第二数据量与上述可用存储容量之和小于上述第一数据量的情况下,基于上述多个数据索引各自的使用属性,确定第二初始待删除数据索引;从上述存储空间中确定与第二初始待删除数据索引对应的第二初始待删除数据的第三数据量;将上述第二数据量、第三数据量以及上述可用存储容量之和,与上述第一数据量进行比对,得到第二比对结果;在上述第二比对结果表征上述第二数据量、第三数据量以及上述可用存储容量之和大于上述第一数据量的情况下,确定上述待删除数据索引为第一初始待删除数据索引和第二初始待删除数据索引。

6、根据本公开的实施例,上述多个索引队列各自包括权重域值,上述权重域值与上述索引队列的优先级呈正相关;上述基于上述目标数据权重和索引队列优先级排序结果,从多个索引队列中确定第一目标索引队列,包括:将上述目标数据权重与多个上述权重域值进行匹配,确定与上述目标数据权重匹配的目标权重域值;将与上述目标权重域值相对应的索引队列作为第一目标索引队列。

7、根据本公开的实施例,上述基于上述数据缓存请求包括的待缓存数据的数据权重,确定目标数据权重,包括:基于上述数据缓存请求包括的待缓存数据的数据权重,从权重直方图包括的多个权重组中,确定与上述数据权重对应的目标权重组,其中,上述多个权重组包括各自对应的数据权重范围;基于上述目标权重组,确定上述目标数据权重。

8、根据本公开的实施例,上述第一目标索引队列还包括与上述数据索引相对应的数据摘要;上述方法还包括:基于上述待缓存数据,生成待缓存数据摘要;将上述待缓存数据摘要,与多个上述数据索引各自的数据摘要进行匹配,得到匹配结果;在上述匹配结果表征上述第一目标索引队列中存在与上述待缓存数据摘要相同的目标数据摘要的情况下,确定与上述目标数据摘要对应的目标数据索引和与上述目标数据索引对应的目标数据;基于上述待缓存数据索引更新上述目标数据索引;基于上述待缓存数据更新上述目标数据。

9、本公开的第二方面提供了一种数据处理装置,包括:权重确定模块,用于响应于接收到数据缓存请求,基于上述数据缓存请求包括的待缓存数据的数据权重,确定目标数据权重,其中,上述数据权重表征上述待缓存数据的重要程度;队列确定模块,用于基于上述目标数据权重和索引队列优先级排序结果,从多个索引队列中确定第一目标索引队列,其中,上述索引队列优先级排序结果是按照优先级对上述多个索引队列排序得到的;索引确定模块,用于基于上述待缓存数据,确定上述待缓存数据的待缓存数据索引;索引存储模块,用于将上述待缓存数据索引存储至上述第一目标索引队列中;以及数据存储模块,用于将上述待缓存数据存储至缓存空间中。

10、本公开的第三方面提供了一种电子设备,包括:一个或多个处理器;存储器,用于存储一个或多个程序,其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得一个或多个处理器执行上述数据处理方法。

11、本公开的第四方面还提供了一种计算机可读存储介质,其上存储有可执行指令,该指令被处理器执行时使处理器执行上述数据处理方法。

12、本公开的第五方面还提供了一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现上述数据处理方法。

13、根据本公开的实施例,通过数据缓存请求包括的待缓存数据的数据权重,确定目标数据权重,数据权重可以表征待缓存数据的重要程度,并且利用目标数据权重和索引队列优先级排序结果,可以从多个索引队列中确定第一目标索引队列,以及可以基于待缓存数据确定待缓存数据索引,将待缓存数据索引存储至第一目标索引队列中,将待缓存数据存储至缓存空间中。由于为待缓存数据确定了目标数据权重,从而知悉了待缓存数据的重要程度,又利用目标数据权重和索引队列优先级排序结果,为待缓存数据确定对应的第一目标索引队列,以及采用了对待缓存数据计算待缓存数据索引的方式,将待缓存数据索引存储至第一目标索引队列中,以使得将不同重要程度的缓存数据的数据索引放置于不同的索引队列中,从而确定了待缓存数据的重要程度,因此,至少部分的解决了无法区分缓存数据是否重要的技术问题,实现了对缓存数据重要程度的有效区分,以及避免对重要缓存数据的误删的技术本文档来自技高网...

【技术保护点】

1.一种数据处理方法,包括:

2.根据权利要求1所述的方法,还包括:

3.根据权利要求2所述的方法,其中,所述第二目标索引队列包括的多个数据索引各自的使用属性;

4.根据权利要求3所述的方法,还包括:

5.根据权利要求1所述的方法,其中,所述多个索引队列各自包括权重域值,所述权重域值与所述索引队列的优先级呈正相关;

6.根据权利要求1所述的方法,其中,所述基于所述数据缓存请求包括的待缓存数据的数据权重,确定目标数据权重,包括:

7.根据权利要求1所述的方法,所述第一目标索引队列还包括与所述数据索引相对应的数据摘要;所述方法还包括:

8.一种数据处理装置,包括:

9.一种电子设备,包括:

10.一种计算机可读存储介质,其上存储有可执行指令,该指令被处理器执行时使处理器执行根据权利要求1~7中任一项所述的方法。

11.一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现根据权利要求1~7中任一项所述的方法。

【技术特征摘要】

1.一种数据处理方法,包括:

2.根据权利要求1所述的方法,还包括:

3.根据权利要求2所述的方法,其中,所述第二目标索引队列包括的多个数据索引各自的使用属性;

4.根据权利要求3所述的方法,还包括:

5.根据权利要求1所述的方法,其中,所述多个索引队列各自包括权重域值,所述权重域值与所述索引队列的优先级呈正相关;

6.根据权利要求1所述的方法,其中,所述基于所述数据缓存请求包括的待缓存数据的数据权重,确定目标数...

【专利技术属性】
技术研发人员:赵鑫
申请(专利权)人:中国工商银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1