【技术实现步骤摘要】
信息同步方法和装置、以及存储介质和电子设备
本公开涉及计算机
,尤其是一种信息同步方法、装置、以及存储介质和电子设备。
技术介绍
随着互联网业务涉及的信息范围越来越广泛,不同业务信息变更可能涉及不同的数据库,目前数据同步工具大致分两类:一类是离线数据同步,支持的数据源丰富,但是无法做到实时同步;另一类是可以做到实时同步,但大都是特定的数据源,且功能简单,无法满足复杂的业务场景。
技术实现思路
为了解决上述技术问题,提出了本公开。本公开的实施例提供了一种信息同步方法和装置、电子设备和存储介质。根据本公开实施例的一个方面,提供了一种信息同步方法,包括:获取多个数据库中的全量信息和增量信息;基于所述多个数据库中的全量信息获得全量任务,对所述多个数据库中的增量信息进行抽象获得增量任务;将所述全量任务和所述增量任务导入目标数据库。可选地,在本公开上述各方法实施例中,所述对多个数据库中的增量信息进行抽象,获得增量任务包括:基于至少一个数据库的操作日志协议,对所述至 ...
【技术保护点】
1.一种信息同步方法,其特征在于,包括:/n获取所述多个数据库中的全量信息和增量信息;/n基于所述多个数据库中的全量信息获得全量任务,对所述多个数据库中的增量信息进行抽象获得增量任务;/n将所述全量任务和所述增量任务导入目标数据库。/n
【技术特征摘要】
1.一种信息同步方法,其特征在于,包括:
获取所述多个数据库中的全量信息和增量信息;
基于所述多个数据库中的全量信息获得全量任务,对所述多个数据库中的增量信息进行抽象获得增量任务;
将所述全量任务和所述增量任务导入目标数据库。
2.根据权利要求1所述的方法,其特征在于,所述对多个数据库中的增量信息进行抽象获得增量任务包括:
基于至少一个数据库的操作日志协议,对所述至少一个数据库中的增量信息进行解析,获得所述至少一个数据库的增量日志信息;
对所述至少一个数据库的增量日志信息进行抽象,获得增量适配信息;
基于所述增量适配信息获得所述增量任务。
3.根据权利要求1所述的方法,其特征在于,所述对多个数据库中的增量信息进行抽象获得增量任务包括:
基于至少一个数据库的中各增量信息对应的日志接口函数,获得所述至少一个数据库的增量日志信息;
对所述至少一个数据库的增量日志信息进行抽象,获得增量适配信息;
基于所述增量适配信息获得所述增量任务。
4.根据权利要求2或3所述的方法,其特征在于,所述基于所述增量适配信息获得所述增量任务包括:
基于预设的时间间隔获取所述增量适配信息,并对获取的增量适配信息进行存储;
基于预设的至少一个提取条件和存储的增量适配信息获得增量任务。
5.根据权利要求4所述的方法,其特征在于,所述基于预设的至少一个提取条件和存储的增量适配信息获得增量任务包括:
基于预设的第一提取条件,对所述存储的增量适配信息中的源表信息进行过滤,获得符合第一提取条件的增量适配信息;
基于预设的第二提取条件,对所述符合第一提取条件的增量适配信息的关联表信息进行过滤,获得符合第二提取条件的增量适配信息;
基于预设的第三提取条件,对所述符合第二提取条件的增量适配信息的修改字段进行过滤,获得所述增量任务。
6.根据权利要求5所述的方法,其特征在于,所述基于预设的第一提取条件,对所述存储的增量适配信息中的源表信息进行过滤,获得符合第一提取条件的增量适配信息和所述基于预设的第二提取条件,对所述符合第一提取条件的增量适配信息中的关联表信息进行过滤,获得符合第二提取条件的增量适配信息之间,还包括:
确定符合第一提取条件的增量适配信息的属性信息是否在预设表中,若在,则继续确定符合第二提取条件的增量适配信息,否则,过滤掉不在所述预设表中的符合第一提取条件的增量适配信息后,继续确定符合第二提取条件的增量适配信息...
【专利技术属性】
技术研发人员:王晓文,王鹏权,王飞,柳超,
申请(专利权)人:北京金堤科技有限公司,
类型:发明
国别省市:北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。