多节点文件备份系统技术方案

技术编号:13328420 阅读:57 留言:0更新日期:2016-07-11 18:37
本申请提供了一种多节点文件备份系统,该备份系统包括主控节点、多个待备份节点、分布式应用服务集群及分布式文件系统,其中,主控节点上部署有主控程序,每个待备份节点上均各自部署有受控程序,其中,主控程序可以通过分布式应用服务集群统一控制多个受控程序,从而各个待备份节点可以并行地将文件备份至分布式文件系统中。本申请以分布式文件系统作为文件的目标备份系统,并且采用主从架构控制的并行备份方式,从而提高了文件的备份效率。

【技术实现步骤摘要】

本申请涉及数据安全
,更具体地,涉及多节点文件备份系统
技术介绍
随着大数据时代的到来,各种应用程序时刻产生着大量的数据,这些数据被保存在计算机的文件中。数据文件是重要的信息资源,需要对文件进行备份。可以知道的是,此些文件的数据量较大,且不断地在增长,并且,此些文件一般散落在不同的计算机节点上。目前,计算机节点备份文件的方式是,各个计算机节点独立地将文件备份至同一个网络硬盘上。然而,由于计算机节点众多,每个计算机节点上的备份程序均需要独立设置并启动,且网络硬盘的读写速度较慢,导致备份效率较低。
技术实现思路
有鉴于此,本申请提供了一种多节点文件备份系统,用以提高多节点文件备份的效率。为实现所述目的,本申请提供的技术方案如下:本申请提供了一种多节点文件备份系统,包括:主控节点、多个待备份节点、分布式应用服务集群及分布式文件系统;其中:所述主控节点上部署有主控程序,每个所述待备份节点上均各自部署有受控程序;所述主控节点用于,通过运行所述主控程序实现以下功能:向所述分布式应用服务集群进行信息注册,以使所述主控节点通过所述分布式应用服务集群与所述待备份节点进行交互;获取预设的配置文件中的备份类型,并依据所述备份类型生成备份指令;其中,所述备份类型为定时备份或即时备份;通过所述分布式应用服务集群将所述备份指令发送至各个所述待备份节点;所述待备份节点用于,通过运行所述受控程序实现以下功能:向所述分布式应用服务集群进行信息注册,以使所述待备份节点通过所述分布式应用服务集群与所述主控节点进行交互;根据所述备份指令,将各自的待备份文件备份至所述分布式文件系统中。可选地,上述的多节点文件备份系统中,所述主控节点上部署的主控程序为Master程序,所述待备份节点上部署的受控程序为Slave程序,所述分布式应用服务集群为Zookeeper集群,所述分布式文件系统为HDFS系统。可选地,上述的多节点文件备份系统中,所述主控节点向所述分布式应用服务集群进行信息注册具体包括:所述主控节点通过所述配置文件确定所述分布式应用服务集群,并获得所述分布式应用服务集群的主机信息;其中,所述主机信息用于链接所述分布式应用服务集群;所述主控节点在所述分布式应用服务集群上创建主数据节点,并在所述主数据节点下创建父受控数据节点。可选地,上述的多节点文件备份系统中,所述待备份节点向所述分布式应用服务集群进行信息注册具体包括:各个所述待备份节点通过所述配置文件确定所述分布式应用服务集群,并获得所述分布式应用服务集群的所述主机信息;每个所述待备份节点在所述父受控数据节点下创建各自的子受控数据节点,并通过各自的监听器监听各自的所述子受控数据节点。可选地,上述的多节点文件备份系统中,所述主控节点通过所述分布式应用服务集群将所述备份指令发送至各个所述待备份节点具体包括:所述主控节点遍历所述父受控数据节点下的所有子受控数据节点,并在每个所述子受控数据节点下创建备份指令节点;所述分布式应用服务集群向每个所述待备份节点的监听器发送触发事件,以使所述监听器捕获所述备份指令节点的创建事件。可选地,上述的多节点文件备份系统中,各个所述待备份节点根据所述备份指令,将各自的待备份文件备份至所述分布式文件系统中具体包括:各个所述待备份节点的监听器监听到备份指令节点的创建事件后,各个所述待备份节点将各自的待备份文件备份至所述分布式文件系统中;各个所述待备份节点在备份开始时,向各自的子受控数据节点下的备份状态节点内写入当前状态,且在备份结束时,向各自的所述备份状态节点内写入结束状态。可选地,上述的多节点文件备份系统中,所述待备份节点中的待备份文件的配置方式包括:所述主控节点根据接收到的配置指令,在所述子受控数据节点下创建备份信息节点,所述备份信息节点用于指示待备份文件。可选地,上述的多节点文件备份系统中,所述主控节点通过所述分布式应用服务集群将所述备份指令发送至各个所述待备份节点具体包括:所述主控节点判断所述备份指令为定时备份或者即时备份;若所述备份指令为定时备份,则所述主控节点启动定时器,并在所述定时器到达发送时间时,所述主控节点通过所述分布式应用服务集群将所述备份指令发送至各个所述待备份节点;若所述备份指令为即时发送,则所述主控节点直接通过所述分布式应用服务集群将所述备份指令发送至各个所述待备份节点。可选地,上述的多节点文件备份系统还包括:所述主控节点还用于,通过运行所述主控程序实现以下功能:获取所述配置文件中的文件恢复指令,并通过所述分布式应用服务集群将所述文件恢复指令发送至各个所述待备份节点;所述待备份节点还用于,通过运行所述受控程序实现以下功能:根据所述文件恢复指令,从所述分布式文件系统中获取备份文件进行文件恢复。可选地,上述的多节点文件备份系统还包括:所述主控节点还用于,通过运行所述主控程序实现以下功能:获取配置文件中的停机指令,并通过所述分布式应用服务集群将所述停机指令发送至各个所述待备份节点;所述待备份节点还用于,通过运行所述受控程序实现以下功能:根据所述停机指令,执行停机操作。由以上的技术方案可知,本申请具有如下有益效果:本申请提供了一种多节点文件备份系统,该备份系统包括主控节点、多个待备份节点、分布式应用服务集群及分布式文件系统,其中,主控节点上部署有主控程序,每个待备份节点上均各自部署有受控程序,其中,主控程序可以通过分布式应用服务集群统一控制多个受控程序,从而各个待备份节点可以并行地将文件备份至分布式文件系统中。本申请以分布式文件系统作为文件的目标备份系统,并且采用主从架构控制的并行备份方式,从而提高了文件的备份效率。附图说明为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。图1为本申请提供的多节点文件备份系统实施例1的结构示意图;图2为本申请提供的多节点文件备份方法实施例1的流程图;图3为本申请提供的主控节点在分布式应用服务集群上进行信息注册的流程示意图;图4为本申请提供的待备份节点在分布式应用服务集群上进行信息注册的流程示意图;图5为本文档来自技高网...

【技术保护点】
一种多节点文件备份系统,其特征在于,包括:主控节点、多个待备份节点、分布式应用服务集群及分布式文件系统;其中:所述主控节点上部署有主控程序,每个所述待备份节点上均各自部署有受控程序;所述主控节点用于,通过运行所述主控程序实现以下功能:向所述分布式应用服务集群进行信息注册,以使所述主控节点通过所述分布式应用服务集群与所述待备份节点进行交互;获取预设的配置文件中的备份类型,并依据所述备份类型生成备份指令;其中,所述备份类型为定时备份或即时备份;通过所述分布式应用服务集群将所述备份指令发送至各个所述待备份节点;所述待备份节点用于,通过运行所述受控程序实现以下功能:向所述分布式应用服务集群进行信息注册,以使所述待备份节点通过所述分布式应用服务集群与所述主控节点进行交互;根据所述备份指令,将各自的待备份文件备份至所述分布式文件系统中。

【技术特征摘要】
1.一种多节点文件备份系统,其特征在于,包括:主控节点、多个待备
份节点、分布式应用服务集群及分布式文件系统;其中:所述主控节点上部
署有主控程序,每个所述待备份节点上均各自部署有受控程序;
所述主控节点用于,通过运行所述主控程序实现以下功能:
向所述分布式应用服务集群进行信息注册,以使所述主控节点通过所述
分布式应用服务集群与所述待备份节点进行交互;
获取预设的配置文件中的备份类型,并依据所述备份类型生成备份指令;
其中,所述备份类型为定时备份或即时备份;
通过所述分布式应用服务集群将所述备份指令发送至各个所述待备份节
点;
所述待备份节点用于,通过运行所述受控程序实现以下功能:
向所述分布式应用服务集群进行信息注册,以使所述待备份节点通过所
述分布式应用服务集群与所述主控节点进行交互;
根据所述备份指令,将各自的待备份文件备份至所述分布式文件系统中。
2.根据权利要求1所述的多节点文件备份系统,其特征在于,所述主控
节点上部署的主控程序为Master程序,所述待备份节点上部署的受控程序为
Slave程序,所述分布式应用服务集群为Zookeeper集群,所述分布式文件系
统为HDFS系统。
3.根据权利要求1所述的多节点文件备份系统,其特征在于,所述主控
节点向所述分布式应用服务集群进行信息注册具体包括:
所述主控节点通过所述配置文件确定所述分布式应用服务集群,并获得
所述分布式应用服务集群的主机信息;其中,所述主机信息用于链接所述分
布式应用服务集群;
所述主控节点在所述分布式应用服务集群上创建主数据节点,并在所述
主数据节点下创建父受控数据节点。
4.根据权利要求3所述的多节点文件备份系统,其特征在于,所述待备
份节点向所述分布式应用服务集群进行信息注册具体包括:
各个所述待备份节点通过所述配置文件确定所述分布式应用服务集群,
并获得所述分布式应用服务集群的所述主机信息;
每个所述待备份节点在所述父受控数据节点下创建各自的子受控数据节
点,并通过各自的监听器监听各自的所述子受控数据节点。
5.根据权利要求3所述的多节点文件备份系统,其特征在于,所述主控
节点通过所述分布式应用服务集群将所述备份指令发送至各个所述待备份节
点具体包括:
所述主控节点遍历所述父受控数据节点下的所有子受控数据节点,并在
每个所述子受控数据...

【专利技术属性】
技术研发人员:张勇于雪龙杜瑞岭曹震王鑫毅
申请(专利权)人:中国农业银行股份有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1