一种数据更新方法及存储介质技术

技术编号:24995831 阅读:27 留言:0更新日期:2020-07-24 17:58
本申请实施例提供了一种数据更新方法及存储介质,应用于数据更新系统,数据更新系统包括数据库服务器、灾备库设备、消息订阅管理设备、终端设备,该方法包括:数据库服务器在检测到目标数据库日志文件更新后,将目标数据库日志文件发送至灾备库设备以便灾备库设备识别日志文件标签对应的处理类型,若处理类型为指定转发处理类型,则将目标数据库日志文件发送至消息订阅管理设备;消息订阅管理设备将目标数据库日志文件写入目标数据库日志文件对应主题的分区中,并确定订阅了主题的应用程序,发送通知消息至运行了应用程序的终端设备。采用本申请,可以减轻数据库服务器的工作压力,并可以使应用程序的数据变更更加及时。

【技术实现步骤摘要】
一种数据更新方法及存储介质
本申请涉及计算机
,尤其涉及一种数据更新方法及存储介质。
技术介绍
在业务系统架构中,数据库主要用于持久化数据、保存数据变更集、记录状态转换关系,是现在业务系统中不可或缺的一部分。由于数据几乎全部都存在数据库中,每行数据的数据变更,如删除、更新、新增等操作也发生在数据库中。现在业务系统关系复杂,依赖较多,很多时候其他系统需要获取数据库中数据变更信息,然后基于变更内容,触发对应逻辑。目前,应用程序主要和数据库主动交互,无法被动获取数据库数据更新变更。对于需要获取数据更新的场景,大都需采用定时轮询的方式重复访问数据库获取数据变更集。由于轮询时间间隔固定,且需应用程序主动触发,该种方式特别消耗数据库服务器的资源,增加了数据库服务器的工作压力。并且,应用程序的数据变更,时效性也存在严重滞后性,不够及时。
技术实现思路
本申请实施例提供了一种数据更新方法及存储介质,可以减轻数据库服务器的工作压力,并可以使应用程序的数据变更更加及时。第一方面,本申请实施例提供的一种数据更新方法,应用于数据更新系统,所述数据更新系统包括数据库服务器、灾备库设备、消息订阅管理设备、终端设备,所述方法包括:所述数据库服务器在检测到目标数据库日志文件更新后,将所述目标数据库日志文件发送至所述灾备库设备,所述目标数据库日志文件携带日志文件标签;所述灾备库设备接收所述数据库服务器发送的所述目标数据库日志文件,并识别所述目标数据库日志文件携带的所述日志文件标签对应的处理类型,若所述处理类型为指定转发处理类型,则将所述目标数据库日志文件发送至所述消息订阅管理设备;所述消息订阅管理设备接收所述灾备库设备发送的所述目标数据库日志文件,并将所述目标数据库日志文件写入所述目标数据库日志文件对应主题的分区中;所述消息订阅管理设备确定订阅了所述主题的应用程序,并发送通知消息至运行了所述应用程序的所述终端设备,所述通知消息用于通知所述主题存在数据更新。可选地,所述数据库服务器将所述目标数据库日志文件发送至所述灾备库设备,包括:所述数据库服务器通过绑定的数据库日志处理组件将所述目标数据库日志文件发送至所述灾备库设备。可选地,所述灾备库设备将所述目标数据库日志文件发送至所述消息订阅管理设备,包括:所述灾备库设备通过绑定的数据库日志处理组件将所述目标数据库日志文件发送至所述消息订阅管理设备。可选地,所述灾备库设备将所述目标数据库日志文件发送至所述消息订阅管理设备,包括:所述灾备库设备根据预设的数据库日志文件和主题的标识的对应关系,确定所述目标数据库日志文件对应主题的标识;所述灾备库设备生成包括所述目标数据库日志文件和所述目标数据库日志文件对应主题的标识的消息,并将所述消息发送至所述消息订阅管理设备。可选地,所述消息订阅管理设备接收所述灾备库设备发送的所述目标数据库日志文件,并将所述目标数据库日志文件写入所述目标数据库日志文件对应主题的分区中,包括:所述消息订阅管理设备接收所述灾备库设备发送的所述消息,并根据所述目标数据库日志文件对应主题的标识,将所述目标数据库日志文件写入所述目标数据库日志文件对应主题的分区中。可选地,所述方法还包括:所述终端设备接收所述通知消息,所述通知消息携带所述目标数据库日志文件;或,所述终端设备在接收到所述通知消息后,从所述消息订阅管理设备获取所述目标数据库日志文件。可选地,所述方法还包括:所述终端设备通过所述应用程序对所述目标数据库日志文件进行解析,得到目标数据,并利用所述目标数据更新所述应用程序的本地数据。可选地,所述终端设备通过所述应用程序对所述目标数据库日志文件进行解析,得到目标数据,包括:所述终端设备通过所述应用程序将所述目标数据库日志文件转换成文本文件,并从所述文本文件提取目标数据。可选地,所述目标数据库日志文件包括对指定数据库操作对应的更新事件,所述目标数据包括所述指定数据库操作对应的数据库操作语句,所述利用所述目标数据更新所述应用程序的本地数据,包括:利用所述指定数据库操作对应的数据库操作语句更新所述应用程序的本地数据。第二方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行以实现如第一方面所述的方法。综上所述,数据库服务器可以在检测到目标数据库日志文件更新后,将目标数据库日志文件发送至灾备库设备;灾备库设备可以接收数据库服务器发送的目标数据库日志文件,并可以识别目标数据库日志文件携带的日志文件标签的处理类型,若处理类型为指定转发处理类型,则将目标数据库日志文件发送至消息订阅管理设备;消息订阅管理设备可以接收灾备库设备发送的目标数据库日志文件,并可以将目标数据库日志文件写入目标数据库日志文件对应主题的分区中;消息订阅管理设备可以确定订阅了主题的应用程序,并可以发送通知消息至运行了应用程序的终端设备,通知消息用于通知主题存在数据更新,采用该过程使得应用程序无需再定时轮询数据库服务器以查询是否存在数据更新,不仅减轻了数据库服务器的工作压力,还使得应用程序的数据变更更加及时。附图说明为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。图1是本申请实施例提供的一种数据更新方法的流程示意图;图2是本申请实施例提供的另一种数据更新方法的流程示意图;图3是本申请实施例提供的一种数据更新系统的结构示意图。具体实施方式下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。请参阅图1,为本申请实施例提供的一种数据更新方法的流程示意图。该方法可以应用于数据更新系统,该订阅更新处理系统包括数据库服务器、灾备库设备、消息订阅管理设备、终端设备。具体的,该方法可以包括以下步骤:S101、所述数据库服务器在检测到目标数据库日志文件更新后,将所述目标数据库日志文件发送至所述灾备库设备,所述目标数据库日志文件携带日志文件标签。其中,本申请实施例提及的数据库服务器可以为目标数据库对应的服务器。在一个实施例中,当该目标数据库为第一数据库时,该目标数据库日志文件可以为该第一数据库包括的binlog二进制日志文件、其中,该第一数据库可以为Mysql数据库或TIDB数据库等数据库。当该目标数据库为第二数据库时,该目标数据库日志文件可以为第二数据库包括的redolog重做日志文件。其中,上述提及的目标数据库日志文件可以包括一个或多个更新事件。该更新事件,例如可以包括触发时间、变更前数据等等信息。在一个实施例中,当该目标数据库日志文件为binlog文件时,可以将该目标数据库文件本文档来自技高网...

【技术保护点】
1.一种数据更新方法,其特征在于,应用于数据更新系统,所述数据更新系统包括数据库服务器、灾备库设备、消息订阅管理设备、终端设备,所述方法包括:/n所述数据库服务器在检测到目标数据库日志文件更新后,将所述目标数据库日志文件发送至所述灾备库设备,所述目标数据库日志文件携带日志文件标签;/n所述灾备库设备接收所述数据库服务器发送的所述目标数据库日志文件,并识别所述目标数据库日志文件携带的所述日志文件标签对应的处理类型,若所述处理类型为指定转发处理类型,则将所述目标数据库日志文件发送至所述消息订阅管理设备;/n所述消息订阅管理设备接收所述灾备库设备发送的所述目标数据库日志文件,并将所述目标数据库日志文件写入所述目标数据库日志文件对应主题的分区中;/n所述消息订阅管理设备确定订阅了所述主题的应用程序,并发送通知消息至运行了所述应用程序的所述终端设备,所述通知消息用于通知所述主题存在数据更新。/n

【技术特征摘要】
1.一种数据更新方法,其特征在于,应用于数据更新系统,所述数据更新系统包括数据库服务器、灾备库设备、消息订阅管理设备、终端设备,所述方法包括:
所述数据库服务器在检测到目标数据库日志文件更新后,将所述目标数据库日志文件发送至所述灾备库设备,所述目标数据库日志文件携带日志文件标签;
所述灾备库设备接收所述数据库服务器发送的所述目标数据库日志文件,并识别所述目标数据库日志文件携带的所述日志文件标签对应的处理类型,若所述处理类型为指定转发处理类型,则将所述目标数据库日志文件发送至所述消息订阅管理设备;
所述消息订阅管理设备接收所述灾备库设备发送的所述目标数据库日志文件,并将所述目标数据库日志文件写入所述目标数据库日志文件对应主题的分区中;
所述消息订阅管理设备确定订阅了所述主题的应用程序,并发送通知消息至运行了所述应用程序的所述终端设备,所述通知消息用于通知所述主题存在数据更新。


2.根据权利要求1所述的方法,其特征在于,所述数据库服务器将所述目标数据库日志文件发送至所述灾备库设备,包括:
所述数据库服务器通过绑定的数据库日志处理组件将所述目标数据库日志文件发送至所述灾备库设备。


3.根据权利要求1或2所述的方法,其特征在于,所述灾备库设备将所述目标数据库日志文件发送至所述消息订阅管理设备,包括:
所述灾备库设备通过绑定的数据库日志处理组件将所述目标数据库日志文件发送至所述消息订阅管理设备。


4.根据权利要求1所述的方法,其特征在于,所述灾备库设备将所述目标数据库日志文件发送至所述消息订阅管理设备,包括:
所述灾备库设备根据预设的数据库日志文件和主题的标识的对应关系,确定所述目标数据库日志文件对应主题的标识;
所述灾备库设备生成包括所述目标数据库日志文件和所述目标数据库日志文件对应主题的标识的消息,并将所述消息...

【专利技术属性】
技术研发人员:左德军
申请(专利权)人:中国平安人寿保险股份有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1