一种数据同步的方法、同步设备、装置及存储介质制造方法及图纸

技术编号:16067143 阅读:35 留言:0更新日期:2017-08-22 18:23
本申请实施例公开了一种数据同步的方法,包括:同步设备将待同步文件发送给内容分发网络服务器,同步设备通过第一数据通道向第一网络存储节点发送同步指示,同步指示包含待同步文件的标识,以使得第一网络存储节点根据同步指示通过第二数据通道从内容分发网络服务器中获取待同步文件。这样,当有文件需要更新同步时,只需要通过第一数据通道向各个网络存储节点发送同步指示,由各个网络存储节点通过第二数据通道从内容分发网络服务器获取相应的待同步文件,无需网络存储节点之间通过专用信道进行大量数据的传输,节省了网络存储节点的专用带宽,提高了网络带宽资源的利用率,同时提高了网络存储节点的业务系统的稳定性。

Data synchronization method, synchronization device, device and storage medium

Including the embodiment of the invention discloses a method, a data synchronization: synchronization equipment will be sent to the web server to synchronize files distributed content synchronization device via the first data path is sent to the first network storage node synchronization instructions, synchronization instructions to be synchronized files contain the logo, so that the first network storage node according to the synchronous indication by second data from the content distribution channel to acquire the network server file synchronization. So, when there is a need to update the file synchronization, only through the first channel to send data to each node of network storage synchronization instructions by each network storage node via the second data channel from the CDN server to obtain the corresponding files to be synchronized, no need for network storage nodes of a large amount of data transmission through a dedicated channel, saving dedicated bandwidth network storage nodes, improve network bandwidth utilization, and improve the stability of the business system of network storage nodes.

【技术实现步骤摘要】
一种数据同步的方法、同步设备、装置及存储介质
本申请涉及网络通信领域,尤其涉及一种数据同步的方法、同步设备、装置及存储介质。
技术介绍
随着智能移动终端的普及,用户规模的不断膨胀,用户对资源文件(比如应用安装包、图片、视频、音乐等)的需求量也越来越大。为了提高用户终端的网络访问速度,提高用户体验,业界提供了一种内容分发网络(英文全称:ContentDeliveryNetwork,英文缩写:CDN)技术,该CDN技术主要用于为终端用户选择距离最近的网络存储节点来访问需要的文件,比如某应用文件在全国各区的互联网数据中心(英文全称:InternetDataCenter,英文缩写:IDC)机房都存储有文件副本,终端用户在访问该应用文件时,通过CDN从而选择距离该终端用户近的IDC机房获取该应用文件,从而提高了用户的访问速度。当应用服务器对存储在某网络存储节点的文件进行修改后,为了使得各地区的网络存储节点上的文件能够同步,工程师们会将文件拷贝到不同的网络存储节点。但是大流量跨网络存储节点拷贝文件,会占用网络存储节点的专线带宽,影响网络存储节点的业务系统正常运转,造成网络存储节点的业务系统不稳定。
技术实现思路
本申请实施例提供了一种数据同步的方法、同步设备、装置及存储介质,用于提高网络带宽资源的利用率。本申请实施例第一方面提供一种数据同步的方法,包括:同步设备将待同步文件发送给内容分发网络服务器;同步设备通过第一数据通道向第一网络存储节点发送同步指示,同步指示包含待同步文件的标识,以使得第一网络存储节点根据同步指示通过第二数据通道从内容分发网络服务器中获取待同步文件。一种可能的实现方式中,同步设备为应用服务器;在同步设备将待同步文件发送给内容分发网络服务器之前,方法还包括:应用服务器修改目标文件,或者新增目标文件,以使得目标文件为待同步文件。另一种可能的实现方式中,同步设备为第二网络存储节点;在同步设备将待同步文件发送给内容分发网络服务器之前,方法还包括:第二网络存储节点接收到应用服务器发送的修改目标文件的指示,并根据指示修改目标文件,以使得目标文件为待同步文件;或者,第二网络存储节点接收到应用服务器发送的目标文件,以使得目标文件为待同步文件,目标文件为新增文件。另一种可能的实现方式中,第一数据通道为网络存储节点之间的专用数据通道,第二数据通道为公用数据通道。本申请实施例第二方面提供一种数据同步的方法,包括:第一网络存储节点接收应用服务器或第二网络存储节点通过第一数据通道发送的同步指示,同步指示包含待同步文件的标识;第一网络存储节点根据同步指示通过第二数据通道从内容分发服务器中获取待同步文件;第一网络存储节点将待同步文件更新至本地。一种可能的实现方式中,方法还包括:第一网络存储节点接收应用服务器发送的通过第一数据通道发送的日志文件信息,日志文件信息中包含待同步文件的更改信息;第一网络存储节点根据日志文件信息校验所获取到的待同步文件的内容是否完整;当所获取到的待同步文件的内容不完整时,第一网络存储节点重新向内容分发服务器中获取待同步文件。本申请实施例第三方面提供一种同步设备,包括:发送单元,用于将待同步文件发送给内容分发网络服务器;发送单元还用于,通过第一数据通道向第一网络存储节点发送同步指示,同步指示包含待同步文件的标识,以使得第一网络存储节点根据同步指示通过第二数据通道从内容分发网络服务器中获取待同步文件。一种可能的实现方式中,同步设备为应用服务器;同步设备还包括:修改单元,用于在发送单元将待同步文件发送给内容分发网络服务器之前,修改目标文件,或者新增目标文件,以使得目标文件为待同步文件。另一种可能的实现方式中,同步设备为第二网络存储节点;同步设备还包括:接收单元,用于在发送单元将待同步文件发送给内容分发网络服务器之前,接收到应用服务器发送的修改目标文件的指示;修改单元,用于根据指示修改目标文件,以使得目标文件为待同步文件;或者,接收单元还用于,接收到应用服务器发送的目标文件,以使得目标文件为待同步文件,目标文件为新增文件。另一种可能的实现方式中,第一数据通道为网络存储节点之间的专用数据通道,第二数据通道为公用数据通道。本申请实施例第四方面提供一种数据同步的装置,包括:接收单元,用于接收应用服务器或第二网络存储节点通过第一数据通道发送的同步指示,同步指示包含待同步文件的标识;获取单元,用于根据同步指示通过第二数据通道从内容分发服务器中获取待同步文件;更新单元,用于将待同步文件更新至本地。一种可能的实现方式中,接收单元还用于:接收应用服务器发送的通过第一数据通道发送的日志文件信息,日志文件信息中包含待同步文件的更改信息;装置还包括:校验单元,用于根据日志文件信息校验所获取到的待同步文件的内容是否完整;获取单元还用于,当所获取到的待同步文件的内容不完整时,重新向内容分发服务器中获取待同步文件。本申请实施例第五方面提供一种计算机装置,计算机装置包括处理器,处理器用于执行存储器中存储的计算机程序时实现如第一方面或第二方面中任意一种实现方式的步骤。本申请实施例第六方面提供一种计算机可读存储介质,其上存储有计算机程序(指令),其特征在于:计算机程序(指令)被处理器执行时实现如第一方面或第二方面中任意一种实现方式的步骤。从以上技术方案可以看出,本申请实施例具有以下优点:同步设备将待同步文件发送给内容分发网络服务器,同步设备通过第一数据通道向第一网络存储节点发送同步指示,同步指示包含待同步文件的标识,以使得第一网络存储节点根据同步指示通过第二数据通道从内容分发网络服务器中获取待同步文件。这样,当有文件需要更新同步时,只需要通过第一数据通道向各个网络存储节点发送同步指示,由各个网络存储节点通过第二数据通道从内容分发网络服务器获取相应的待同步文件,无需网络存储节点之间通过专用信道进行大量数据的传输,节省了网络存储节点的专用带宽,提高了网络带宽资源的利用率,同时提高了网络存储节点的业务系统的稳定性。附图说明图1为本申请实施例中数据同步的方法的一个实施例示意图;图2为本申请实施例中数据同步的方法的另一实施例示意图;图3为本申请实施例中数据同步的方法的另一实施例示意图;图4为本申请实施例中同步设备的一个实施例示意图;图5为本申请实施例中同步设备的另一实施例示意图;图6为本申请实施例中数据同步的装置的一个实施例示意图;图7为本申请实施例中同步设备或数据同步装置的另一实施例示意图。具体实施方式本申请实施例提供了一种数据同步的方法、同步设备、装置及存储介质,用于提高网络带宽资源的利用率。下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清本文档来自技高网...
一种数据同步的方法、同步设备、装置及存储介质

【技术保护点】
一种数据同步的方法,其特征在于,所述方法包括:同步设备将待同步文件发送给内容分发网络服务器;所述同步设备通过第一数据通道向第一网络存储节点发送同步指示,所述同步指示包含所述待同步文件的标识,以使得所述第一网络存储节点根据所述同步指示通过第二数据通道从所述内容分发网络服务器中获取所述待同步文件。

【技术特征摘要】
1.一种数据同步的方法,其特征在于,所述方法包括:同步设备将待同步文件发送给内容分发网络服务器;所述同步设备通过第一数据通道向第一网络存储节点发送同步指示,所述同步指示包含所述待同步文件的标识,以使得所述第一网络存储节点根据所述同步指示通过第二数据通道从所述内容分发网络服务器中获取所述待同步文件。2.根据权利要求1所述的方法,其特征在于,所述同步设备为应用服务器;在所述同步设备将待同步文件发送给内容分发网络服务器之前,所述方法还包括:所述应用服务器修改目标文件,或者新增目标文件,以使得所述目标文件为待同步文件。3.根据权利要求1所述的方法,其特征在于,所述同步设备为第二网络存储节点;在所述同步设备将待同步文件发送给内容分发网络服务器之前,所述方法还包括:所述第二网络存储节点接收到应用服务器发送的修改目标文件的指示,并根据所述指示修改所述目标文件,以使得所述目标文件为待同步文件;或者,所述第二网络存储节点接收到应用服务器发送的目标文件,以使得所述目标文件为待同步文件,所述目标文件为新增文件。4.一种数据同步的方法,其特征在于,所述方法包括:第一网络存储节点接收应用服务器或第二网络存储节点通过第一数据通道发送的同步指示,所述同步指示包含待同步文件的标识;所述第一网络存储节点根据所述同步指示通过第二数据通道从内容分发服务器中获取所述待同步文件;所述第一网络存储节点将所述待同步文件更新至本地。5.根据权利要求4所述的方法,其特征在于,所述方法还包括:所述第一网络存储节点接收所述应用服务器发送的通过第一数据通道发送的日志文件信息,所述日志文件信息中包含所述待同步文件的更改信息;所述第一网络存储节点根据所述日志文件...

【专利技术属性】
技术研发人员:胡成元
申请(专利权)人:珠海市魅族科技有限公司
类型:发明
国别省市:广东,44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1