数据处理方法、装置、设备及存储介质制造方法及图纸

技术编号:24707948 阅读:54 留言:0更新日期:2020-06-30 23:58
本发明专利技术公开了一种数据处理方法、装置、设备及存储介质,该方法包括:控制目标驻守线程从分片控制表中获取待处理的目标数据分片的分片编号,控制目标驻守线程根据目标数据分片的分片编号,从快速访问表中获取对应的分片编号与目标数据分片的分片编号相同的多个目标数据,其中,目标数据分片包括多个目标数据,多个目标数据为数据库中相同热点字段对应的数据,控制目标驻守线程依次处理多个目标数据。其具有以下技术效果:目标驻守线程以顺序执行的方式依次处理多个目标数据,数据处理过程复杂度低、性能损坏程度低,同时,可以实现热点字段按照预期被更新。

【技术实现步骤摘要】
数据处理方法、装置、设备及存储介质
本专利技术实施例涉及通信
,尤其涉及一种数据处理方法、装置、设备及存储介质。
技术介绍
在对数据库进行操作的过程中,某些字段中的数据需要被并发频繁更新,可以将这些字段称为热点字段。如果在同一时间,接收到的多个数据均是对某一热点字段进行更新时,如何实现对热点字段的更新非常重要。目前,在同一时间,接收到同一热点字段对应的多个数据时,会根据这些数据,并行对热点字段进行更新。但是,上述更新过程,一方面,可能导致更新过程复杂度较高、性能损耗较高,另一方面,并行更新可能导致热点字段无法按照预期被更新。
技术实现思路
本专利技术提供一种数据处理方法、装置、设备及存储介质,以解决目前更新热点字段时,复杂度较高、性能损耗较高以及无法按照预期更新的技术问题。第一方面,本专利技术实施例提供一种数据处理方法,包括:控制目标驻守线程从分片控制表中获取待处理的目标数据分片的分片编号;控制所述目标驻守线程根据所述目标数据分片的分片编号,从快速访问表中获取对应的分片编号与所述本文档来自技高网...

【技术保护点】
1.一种数据处理方法,其特征在于,包括:/n控制目标驻守线程从分片控制表中获取待处理的目标数据分片的分片编号;/n控制所述目标驻守线程根据所述目标数据分片的分片编号,从快速访问表中获取对应的分片编号与所述目标数据分片的分片编号相同的多个目标数据;其中,所述目标数据分片包括所述多个目标数据,所述多个目标数据为数据库中相同热点字段对应的数据;/n控制所述目标驻守线程依次处理多个所述目标数据。/n

【技术特征摘要】
1.一种数据处理方法,其特征在于,包括:
控制目标驻守线程从分片控制表中获取待处理的目标数据分片的分片编号;
控制所述目标驻守线程根据所述目标数据分片的分片编号,从快速访问表中获取对应的分片编号与所述目标数据分片的分片编号相同的多个目标数据;其中,所述目标数据分片包括所述多个目标数据,所述多个目标数据为数据库中相同热点字段对应的数据;
控制所述目标驻守线程依次处理多个所述目标数据。


2.根据权利要求1所述的方法,其特征在于,所述分片控制表还包括:锁标志;
所述控制目标驻守线程从分片控制表中获取待处理的目标数据分片的分片编号,包括:
控制所述目标驻守线程从所述分片控制表中获取第一数据分片的锁标志;
若所述第一数据分片的锁标志为释放状态,则控制所述目标驻守线程将所述第一数据分片确定为所述目标数据分片,将所述第一数据分片的分片编号确定为所述目标数据分片的分片编号。


3.根据权利要求2所述的方法,其特征在于,所述分片控制表还包括:令牌及执行开始时间;
所述控制所述目标驻守线程依次处理所述目标数据之后,所述方法还包括:
控制所述目标驻守线程将所述分片控制表中所述目标数据分片的锁标志修改为锁定状态;
控制所述目标驻守线程将所述分片控制表中所述目标数据分片的令牌更新为所述目标驻守线程的令牌;
在所述目标驻守线程开始依次处理所述目标数据后,控制所述目标驻守更新所述分片控制表中所述目标数据分片的执行开始时间。


4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
若所述第一数据分片的锁标志为锁定状态,则确定所述第一数据分片的执行开始时间与当前时间的差值的绝对值是否大于预设时间阈值;
若确定所述第一数据分片的执行开始时间与当前时间的差值的绝对值大于所述预设时间阈值,则将所述第一数据分片确定为所述目标数据分片,将所述第一数据分片的分片编号确定为所述目标数据分片的分片编号;
控制所述目标驻守线程将所述分片控制表中所述目标数据分片的令牌更新为所述目标驻守线程的令牌;
在所述目标驻守线程开始依次处理所述目标数据后,控制所述目标驻守更新所述分片控制表中所述目标数据分片的执行开始时间;
控制所述目标驻守线程在依次处理所述目标数据的过程中,判断所述目标数据分片的令牌...

【专利技术属性】
技术研发人员:邱城晓熊涛
申请(专利权)人:中国建设银行股份有限公司建信金融科技有限责任公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1