数据更新方法、装置、电子设备及计算机存储介质制造方法及图纸

技术编号:40092327 阅读:13 留言:0更新日期:2024-01-23 16:24
本申请实施例公开了一种数据更新方法、装置、电子设备及计算机存储介质;在本申请实施例中,获取需存储至分布式数据库的全量数据,并对所述全量数据进行切片处理,得到所述分布式数据库中的各个分布式节点对应的子全量数据;将所述分布式节点对应的子全量数据,发送至所述分布式节点;触发所述分布式节点创临时本地表,并将所述分布式节点对应的子全量数据存储至所述临时本地表中;触发所述分布式节点在目标时间,删除所述分布式节点中的正式本地表,并将所述临时本地表重命名为所述正式本地表的名称,以完成所述分布式节点中数据的更新。本申请实施例可以减少分布式数据库的不可用时间。

【技术实现步骤摘要】

本申请涉及数据处理,具体涉及一种数据更新方法、装置、电子设备及计算机存储介质


技术介绍

1、clickhouse分布式数据库是一个用于联机分析处理(online analysisprocessing,olap)的开源列式数据库,由于其功能完善、性能强悍,因此,其在各个领域被广泛应用。

2、但是,clickhouse分布式数据库不支持事务操作,导致clickhouse数分布式据库的各个节点进行数据更新时,clickhouse分布式数据库不可用的时间较长。


技术实现思路

1、本申请实施例提供一种数据更新方法、装置、电子设备及计算机存储介质,可以解决clickhouse分布式数据库不可用的时间较长的技术问题。

2、本申请实施例提供一种数据更新方法,包括:

3、获取需存储至分布式数据库的全量数据,并对上述全量数据进行切片处理,得到上述分布式数据库中的各个分布式节点对应的子全量数据;

4、将上述分布式节点对应的子全量数据,发送至上述分布式节点;>

5、触发上述本文档来自技高网...

【技术保护点】

1.一种数据更新方法,其特征在于,包括:

2.根据权利要求1所述的数据更新方法,其特征在于,所述触发所述分布式节点在目标时间,删除所述分布式节点中的正式本地表,并将所述临时本地表重命名为所述正式本地表的名称,以完成所述分布式节点中数据的更新,包括:

3.根据权利要求2所述的数据更新方法,其特征在于,在所述若所述校验结果为校验通过,则触发所述分布式节点在目标时间,删除所述分布式节点中的正式本地表,并将所述临时本地表重命名为所述正式本地表的名称之前,还包括:

4.根据权利要求1所述的数据更新方法,其特征在于,所述触发所述分布式节点创临时本地表,并将所述分布...

【技术特征摘要】

1.一种数据更新方法,其特征在于,包括:

2.根据权利要求1所述的数据更新方法,其特征在于,所述触发所述分布式节点在目标时间,删除所述分布式节点中的正式本地表,并将所述临时本地表重命名为所述正式本地表的名称,以完成所述分布式节点中数据的更新,包括:

3.根据权利要求2所述的数据更新方法,其特征在于,在所述若所述校验结果为校验通过,则触发所述分布式节点在目标时间,删除所述分布式节点中的正式本地表,并将所述临时本地表重命名为所述正式本地表的名称之前,还包括:

4.根据权利要求1所述的数据更新方法,其特征在于,所述触发所述分布式节点创临时本地表,并将所述分布式节点对应的子全量数据存储至所述临时本地表中,包括:

5.根据权利要求1-4任一项所述的数据更新方法,其特征在于,所述全量数据存储在数据表中;

...

【专利技术属性】
技术研发人员:王东
申请(专利权)人:深圳TCL新技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1