数据同步方法、装置、电子设备和存储介质制造方法及图纸

本公开涉及一种数据同步方法、装置、电子设备和存储介质，涉及数据同步技术领域。其中的方法包括：响应于接收到数据同步任务，生成至少一个任务运行实例；获取数据同步任务的配置信息；根据配置信息，将至少一个任务运行实例加入预设的计划表中；间隔预设时长对计划表中的任务运行实例进行轮询，按顺序将各任务运行实例下发给运行容器；根据配置信息，确定运行容器执行任务运行实例的所需资源；为运行容器分配所需资源，以执行任务运行实例，实现数据同步。应用本公开能够避免同一时间大量任务提交产生的失败问题，提升数据同步的效率。

【技术实现步骤摘要】

本申请涉及数据同步，尤其涉及一种数据同步方法、装置、电子设备和存储介质。

技术介绍

1、数据同步是指在不同数据源或数据系统之间，通过一定的机制或方法，确保数据的一致性和实时性。这些数据源或系统可能是数据库、文件、云服务、应用程序等。数据同步的目的是为了消除数据孤岛，实现数据的共享和一致性，以便在各种场景下都能访问到最新、最准确的数据。

2、由于数据同步任务运行时需要抽取源端数据到内存中进行数据转换和处理，因此对于运行环境的内存大小有一定的要求。在不改变数据同步工具或现有架构的情况下，如何能够提升数据同步的并发能力，降低对服务器内存资源的强依赖，提升服务器资源的有效利用，成为亟待解决的问题。

技术实现思路

1、本公开的实施例提供了一种数据同步方法、装置、电子设备和存储介质。

2、第一方面，本公开的实施例提供了一种数据同步方法，包括：响应于接收到数据同步任务，生成至少一个任务运行实例；获取数据同步任务的配置信息；根据配置信息，将至少一个任务运行实例加入预设的计划表中；间隔预设时长对计划表中本文档来自技高网...

【技术保护点】

1.一种数据同步方法，包括：

2.根据权利要求1所述的方法，其中，所述配置信息包括优先级；以及

3.根据权利要求1所述的方法，其中，所述方法还包括：

4.根据权利要求3所述的方法，其中，所述间隔预设时长对所述计划表中的任务运行实例进行轮询，按顺序将各任务运行实例下发给运行容器，包括：

5.根据权利要求4所述的方法，其中，所述在数据同步过程中，实时更新各任务运行实例的属性信息，包括：

6.根据权利要求1所述的方法，其中，所述方法还包括：

7.根据权利要求3所述的方法，其中，所述在数据同步过程中，更新各任务运行实例的属性...

【技术特征摘要】

1.一种数据同步方法，包括：

2.根据权利要求1所述的方法，其中，所述配置信息包括优先级；以及

3.根据权利要求1所述的方法，其中，所述方法还包括：

4.根据权利要求3所述的方法，其中，所述间隔预设时长对所述计划表中的任务运行实例进行轮询，按顺序将各任务运行实例下发给运行容器，包括：

5.根据权利要求4所述的方法，其中，所述在数据同步过程中，实时更新各任务运行实例的属性信息，包括：

6.根据权利要求1所述的方法，其中，所述方法还包括...

【专利技术属性】
技术研发人员：彭壮，
申请(专利权)人：中电云计算技术有限公司，
类型：发明
国别省市：