数据同步方法、装置、计算机设备和存储介质制造方法及图纸

本申请涉及一种数据同步方法、装置、计算机设备和存储介质。所述方法包括：接收调度服务器发送的数据同步指令；根据所述数据同步指令在源服务器中查询已有的数据和相应的数据存储路径；将所述数据按照所述数据存储路径全量同步到本地；当全量同步完成时，向所述调度服务器发送表示全量同步完成的提示信息；所述提示信息用于指示所述调度服务器触发增量数据同步指令；接收所述调度服务器发送的增量数据同步指令；根据所述增量数据同步指令，在所述源服务器中查询从开始全量同步起所新增的增量数据和相应的增量数据存储路径；将所述增量数据按照所述增量数据存储路径增量同步到本地。采用本方案能够提高数据同步效率。

【技术实现步骤摘要】
数据同步方法、装置、计算机设备和存储介质
本申请涉及计算机
，特别是涉及一种数据同步方法、装置、计算机设备和存储介质。
技术介绍
随着计算机技术的发展，大数据技术逐渐发展起来，大数据技术的主要特点是数据量大，即大数据是由大量数据组成的数据集合。为了适应业务发展需求，可能会通过数据同步方式，将已有的海量大数据由一个服务器或服务器集群同步至另一个服务器或服务器集群。目前，常用的数据同步方式，是在需要进行数据同步时由人工手动触发数据同步开始流程，数据同步过程中由人工手动从源服务器或源服务器集群中导出待同步的数据，再手动将所导出的数据导入另一个服务器或服务器集群中，从而实现服务器之间的数据同步。然而，该种数据同步方式依赖于人工的手动参与，不仅浪费了人力物力，还存在同步效率低下的问题。
技术实现思路
基于此，有必要针对上述技术问题，提供一种能够提高数据同步效率的数据同步方法、装置、计算机设备和存储介质。一种数据同步方法，所述方法包括：接收调度服务器发送的数据同步指令；根据所述数据同步指令在源服务器中查询已有的数据和相应的数据存储路径；将所述数据按照所述数据存储路径全量同步到本地；当全量同步完本文档来自技高网...

【技术保护点】
1.一种数据同步方法，所述方法包括：接收调度服务器发送的数据同步指令；根据所述数据同步指令在源服务器中查询已有的数据和相应的数据存储路径；将所述数据按照所述数据存储路径全量同步到本地；当全量同步完成时，向所述调度服务器发送表示全量同步完成的提示信息；所述提示信息用于指示所述调度服务器触发增量数据同步指令；接收所述调度服务器发送的增量数据同步指令；根据所述增量数据同步指令，在所述源服务器中查询从开始全量同步起所新增的增量数据和相应的增量数据存储路径；将所述增量数据按照所述增量数据存储路径增量同步到本地。

【技术特征摘要】
1.一种数据同步方法，所述方法包括：接收调度服务器发送的数据同步指令；根据所述数据同步指令在源服务器中查询已有的数据和相应的数据存储路径；将所述数据按照所述数据存储路径全量同步到本地；当全量同步完成时，向所述调度服务器发送表示全量同步完成的提示信息；所述提示信息用于指示所述调度服务器触发增量数据同步指令；接收所述调度服务器发送的增量数据同步指令；根据所述增量数据同步指令，在所述源服务器中查询从开始全量同步起所新增的增量数据和相应的增量数据存储路径；将所述增量数据按照所述增量数据存储路径增量同步到本地。2.根据权利要求1所述的方法，其特征在于，所述接收调度服务器发送的数据同步指令之后，所述方法还包括：根据所述数据同步指令获取认证密钥；向认证服务器发送携带所述认证密钥的认证请求；所述认证请求用于指示所述认证服务器对所述认证密钥进行认证；当接收到所述认证服务器反馈的表示认证通过的提示信息时，执行所述根据所述数据同步指令在源服务器中查询已有的数据和相应的数据存储路径的步骤。3.根据权利要求1所述的方法，其特征在于，所述根据所述数据同步指令在源服务器中查询已有的数据和相应的数据存储路径，包括：根据所述数据同步指令在源服务器中查询已有的元数据；获取所述元数据所包括的数据存储路径；根据所述数据存储路径在所述源服务器中查询相应的数据。4.根据权利要求3所述的方法，其特征在于，所述根据所述数据同步指令在源服务器中查询已有的元数据，包括：根据所述数据同步指令在源服务器中查询已有的元数据和相应的元数据存储路径；将所述元数据按照所述元数据库存储路径同步到本地。5.根据权利要求1所述的方法，其特征在于，所述接收所述调度服务器发送的增量数据同步指令之后，所述方法还包括：将所述源服务器和本地进行元数据匹配；根据匹配结果确定所述源服务器相对于本地的增量元数据；将所述增量元数据同步到本地；基于所述增量元数据，将所述源服...

【专利技术属性】
技术研发人员：王玉，黄奉线，
申请(专利权)人：康键信息技术深圳有限公司，
类型：发明
国别省市：广东,44