针对分布式系统的数据过期处理方法和相关设备技术方案

技术编号:39726910 阅读:12 留言:0更新日期:2023-12-17 23:31
本申请实施例了提供一种针对分布式系统的数据过期处理方法,该针对分布式系统的数据过期处理方法包括:为目标存储表创建目标协程

【技术实现步骤摘要】
针对分布式系统的数据过期处理方法和相关设备


[0001]本申请实施例涉及计算机
,尤其涉及一种针对分布式系统的数据过期处理方法

装置

电子设备

计算机可读存储介质


技术介绍

[0002]分布式系统是由多个独立计算机节点组成的计算机系统,计算机节点通过网络相互连接,共同协作完成某种任务或提供某种服务

在诸如
KV
存储系统等的分布式系统中,可以提供数据存储服务

分布式系统会在数据到期之后,通知业务执行相应的后处理逻辑

然而,分布式系统在执行上述通知操作时,速度较慢,不具备及时性

[0003]需要说明的是,上述内容并不必然是现有技术,也不用于限制本申请的专利保护范围


技术实现思路

[0004]本申请实施例提供一种针对分布式系统的数据过期处理方法及相关设备,以解决相关技术存在的问题,技术方案如下:
[0005]第一方面,本申请实施例提供了一种针对分布式系统的数据过期处理方法,所述分布式系统通过多个存储表存储数据,每个存储表分别关联有索引表,索引表用于存储相应存储表中每条数据的索引,同一个存储表的每条数据的存活周期相同;所述方法包括:
[0006]为目标存储表创建目标协程,所述目标存储表为多个存储表之一并关联有目标索引表;
[0007]通过所述目标协程获取目标存储表的目标存活周期及所述目标索引表中各个索引的时间戳;
[0008]根据所述目标存活周期及各个索引的时间戳,获取最先到期的目标数据的剩余存活时间;
[0009]根据所述目标数据的剩余存活时间,挂起所述目标协程直至所述目标数据到期;及
[0010]在所述目标数据到期的情况下,通过目标协程发起所述目标数据的到期通知和
/
或删除通知

[0011]第二方面,本申请实施例提供了一种针对分布式系统的数据过期处理装置,所述分布式系统通过多个存储表存储数据,每个存储表分别关联有索引表,索引表用于存储相应存储表中每条数据的索引,同一个存储表的每条数据的存活周期相同;所述装置包括:
[0012]第一创建模块,用于为目标存储表创建目标协程,所述目标存储表为多个存储表之一并关联有目标索引表;
[0013]第一获取模块,用于通过所述目标协程获取目标存储表的目标存活周期及所述目标索引表中各个索引的时间戳;
[0014]第二获取模块,用于根据所述目标存活周期及各个索引的时间戳,获取最先到期
的目标数据的剩余存活时间;
[0015]挂起模块,用于根据所述目标数据的剩余存活时间,挂起所述目标协程直至所述目标数据到期;及
[0016]第一发起模块,用于在所述目标数据到期的情况下,通过目标协程发起所述目标数据的到期通知和
/
或删除通知

[0017]第三方面,本申请实施例提供了一种电子设备,该电子设备包括:至少一个处理器;以及与至少一个处理器通信连接的存储器;其中,存储器存储有可被至少一个处理器执行的指令,以使至少一个处理器能够执行上述针对分布式系统的数据过期处理方法

[0018]第四方面,本申请实施例提供了一种计算机可读存储介质,计算机可读存储介质存储计算机指令,当计算机指令在计算机上运行时,上述各方面任一种实施方式中的方法被执行

[0019]上述技术方案中的优点或有益效果至少包括:
[0020]为目标存储表创建目标协程,通过目标协程获取最先到期的目标数据的剩余存活时间,继而根据目标数据的剩余存活时间,挂起目标协程等待目标数据到期

在目标数据到期时,可以通过目标协程立即发起目标数据的到期通知和
/
或删除通知,而无需进行异步扫描,提高发起数据的到期通知和
/
或删除通知的速度

附图说明
[0021]附图示例性地示出了实施例并且构成说明书的一部分,与说明书的文字描述一起用于讲解实施例的示例性实施方式

所示出的实施例仅出于例示的目的,并不限制权利要求的范围

在所有附图中,相同的附图标记指代类似但不一定相同的要素

[0022]图1示意性示出了根据本申请一实施方式的针对分布式系统的数据过期处理方法的运行环境图;
[0023]图2示意性示出了根据本申请一实施方式的针对分布式系统的数据过期处理方法的流程图;
[0024]图3示意性示出了索引表和存储表的示意图;
[0025]图4示意性示出了根据本申请一实施方式的针对分布式系统的数据过期处理方法的新增流程图;
[0026]图5示意性示出了根据本申请一实施方式的针对分布式系统的数据过期处理方法的新增流程图;
[0027]图6示意性示出了根据本申请一实施方式的针对分布式系统的数据过期处理方法的新增流程图;
[0028]图7示意性示出了图2中步骤
S208
的子步骤;
[0029]图8示意性示出了图2中步骤
S208
的子步骤;
[0030]图9示意性示出了根据本申请另一实施方式的针对分布式系统的数据过期处理装置的框图;及
[0031]图
10
示意性示出了根据本申请另一实施方式中的电子设备的硬件架构示意图

具体实施方式
[0032]在下文中,仅简单地描述了某些示例性实施例

正如本领域技术人员可认识到的那样,在不脱离本申请的精神或范围的情况下,可通过各种不同方式修改所描述的实施例

因此,附图和描述被认为本质上是示例性的而非限制性的

[0033]首先,提供本申请涉及的术语解释:
[0034]TTL(Time To Live)
:数据在存储系统
(

KV
存储系统
)
中的存活周期

[0035]RPC(Remote Procedure Call
,远程过程调用协议
)
:允许一个计算机程序
(
可以是客户端
)
调用另一个计算机上的程序或函数
(
可以是服务器
)
而不需要显式地处理网络通信细节

[0036]Table(
存储表
)
:一批具有相同属性的数据的集合,其中,
TTL

Table
的属性之一

[0037]Coroutine(
协程
)
:一种特殊的函数,可以在某个地方挂起,并且可以重新在挂起处继续运行

[0038]挂起:是在协程执本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.
一种针对分布式系统的数据过期处理方法,其特征在于,所述分布式系统通过多个存储表存储数据,每个存储表分别关联有索引表,索引表用于存储相应存储表中每条数据的索引,同一个存储表的每条数据的存活周期相同;所述方法包括:为目标存储表创建目标协程,所述目标存储表为多个存储表之一并关联有目标索引表;通过所述目标协程获取目标存储表的目标存活周期及所述目标索引表中各个索引的时间戳;根据所述目标存活周期及各个索引的时间戳,获取最先到期的目标数据的剩余存活时间;根据所述目标数据的剩余存活时间,挂起所述目标协程直至所述目标数据到期;及在所述目标数据到期的情况下,通过目标协程发起所述目标数据的到期通知和
/
或删除通知
。2.
根据权利要求1所述的方法,其特征在于,所述方法还包括:在所述目标存储表的目标存活周期变大的情况下,执行以下操作:销毁目标协程;为所述目标存储表创建新目标协程;通过所述新目标协程,获取所述目标存储表变大后的目标存活周期及所述目标索引表中各个索引的时间戳;根据变大后的目标存活周期及各个索引的时间戳,获取最先到期的目标数据的剩余存活时间;根据所述目标数据的剩余存活时间,挂起所述新目标协程直至所述目标数据到期;及在所述目标数据到期的情况下,通过所述新目标协程发起所述目标数据的到期通知和
/
或删除通知
。3.
根据权利要求1所述的方法,其特征在于,所述方法还包括:在所述目标存储表的目标存活周期变小的情况下,执行以下操作:销毁目标协程;为所述目标存储表创建新目标协程;通过所述新目标协程获取变小后的目标存活周期及所述目标存储表中每条数据的已存活时间;根据所述变小后的目标存活周期以及每条数据的已存活时间,确定已过期数据,所述已过期数据为目标存储表中已存活时间大于变小后的目标存活周期的数据;通过所述新目标协程发起所述已过期数据的批量到期通知和
/
或批量删除通知
。4.
根据权利要求3所述的方法,其特征在于,所述方法还包括:通过所述新目标协程获取所述目标索引表中各个索引的时间戳;根据所述变小后的目标存活周期及各个索引的时间戳,获取未到期数据中最先到期的数据的剩余存活时间,所述未到期数据为目标存储表中已存活时间小于变小后的目标存活周期的数据;根据所述未到期数据中最先到期的待到期数据的剩余存活时间,挂起所述新目标协程直至该待到期数据到期;及
在该待到期数据到期的情况下,通过所述新目标协程发起所述待到期数据的到期通知和
/
或删除通知
。5.
根据权利要求1至4任意一项所述的方法,其特征在于,所述方法应用于生命周期管理服务系统中,所述生命周期管理服务系统与所述分布式系统通过通信接口耦合
。6.
根据权利要求5所述的方法,其特征在于,生命周期管理服务系统包括主节点和多个从节点;其中:所述主节点用...

【专利技术属性】
技术研发人员:刘易
申请(专利权)人:上海哔哩哔哩科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1