对象数据同步方法、计算设备和存储介质技术

本公开提供了一种对象数据同步方法、计算设备和存储介质。其中，对象数据同步方法包括：获取待同步对象的索引数据；根据索引数据，从与待同步对象对应的对象存储系统中获取与索引数据对应的实际数据；以及向目标对象存储系统发送待同步对象，完成对待同步对象的同步，其中，待同步对象包括索引数据和实际数据。待同步对象包括索引数据和实际数据。待同步对象包括索引数据和实际数据。

【技术实现步骤摘要】
对象数据同步方法、计算设备和存储介质


[0001]本公开涉及对象存储
，更具体地，涉及一种数据同步方法、装置、计算设备和存储介质。

技术介绍

[0002]对象存储是一种用于大规模存储非结构化数据的数据存储架构。对象存储将每项数据指定为一个对象，保存在单独的仓库中，将数据、元数据、唯一标识符捆绑在一起，以便访问和检索。对象存储具有高扩展性、低成本、可靠安全等优点。随着云计算的发展，对象存储作为一种更基础的云上资源池设施也越来越受到重视和欢迎。随着使用过程中数据量的暴增，数据价值成几何增长，对象存储系统受到物理条件的限制，会出现机房级或者整个数据中心级的故障。因此设置多地多活和容灾的处理方法成为企业实现数据的安全存储、高可用和业务连续性的主流方式。随着业务量的增长，对象存储系统进行数据同步时会出现数据同步不及时、对象存储系统不稳定的问题。

技术实现思路

[0003]有鉴于此，本公开提供了一种对象数据同步方法、装置、计算设备和存储介质。
[0004]根据本公开的一个方面，提供了一种对象数据同步方法，包括：
[0005]获取待同步对象的索引数据；根据上述索引数据，从与上述待同步对象对应的对象存储系统中获取与上述索引数据对应的实际数据；以及向目标对象存储系统发送待同步对象，完成对上述待同步对象的同步，其中，上述待同步对象包括上述索引数据和上述实际数据。
[0006]根据本公开实施例，上述获取待同步对象的索引数据包括：
[0007]从消息队列中获取上述待同步对象的索引数据，其中，存储于上述消息队列的索引数据是上述对象存储系统根据接收到上述待同步对象的数据存储请求中包括的索引数据，向上述消息队列发送的。
[0008]根据本公开实施例，上述目标对象存储系统是与目标数据同步组件对应的对象存储系统，其中，上述目标数据同步组件是订阅上述消息队列的数据同步组件。
[0009]根据本公开实施例，上述索引数据包括对象名称、对象存储位置索引数据和元数据；其中，上述根据上述索引数据，从与上述待同步对象对应的对象存储系统中获取与上述索引数据对应的实际数据包括：根据上述对象存储位置索引数据，确定与上述索引数据对应的实际数据在上述对象存储系统的存储位置；以及基于上述对象名称和上述元数据，从上述存储位置获取上述实际数据。
[0010]根据本公开实施例，存储于上述消息队列的索引数据的格式与存储于上述对象存储系统是索引数据的格式相同。
[0011]根据本公开的第二个方面，提供了一种对象数据同步方法，包括：
[0012]响应于接收到来自目标数据同步组件的待同步对象，将上述待同步数据进行存
储，其中，上述待同步对象包括索引数据和实际数据，其中，上述实际数据是上述目标数据同步组件根据上述索引数据，从与上述待同步对象对应的对象存储系统中获取的。
[0013]根据本公开实施例，上述索引数据是上述目标数据同步组件从消息队列中获取的。
[0014]根据本公开实施例，存储于上述消息队列的索引数据是与上述待同步对象对应的对象存储系统根据接收到的数据存储请求中包括的索引数据，向上述消息队列发送的。
[0015]根据本公开的第三个方面，提供了一种计算设备，包括：
[0016]一个或多个处理器；存储器，用于存储一个或多个程序，其中，当上述一个或多个程序被上述一个或多个处理器执行时，使得上述一个或多个处理器实现如上上述的方法。
[0017]根据本公开的第四个方面，提供了一种计算机可读存储介质，其上存储有可执行指令，上述可执行指令被处理器执行时使处理器实现如上上述的方法。
[0018]根据本公开的实施例，通过获取索引数据，并基于索引数据从对象存储系统中得到索引数据对应的实际数据，将获得的索引数据和从对象存储系统中得到的实际数据发送到目标对象存储系统。通过上述技术手段，至少部分地克服了相关技术中在的直接通过对象存储系统进行数据同步时，由于数据过多，导致的数据同步不及时、对象存储系统不稳定的问题。
附图说明
[0019]通过以下参照附图对本公开实施例的描述，本公开的上述以及其他目的、特征和优点将更为清楚，在附图中：
[0020]图1示意性示出了根据本公开实施例的对象数据同步方法和装置的示例性系统架构；
[0021]图2示意性示出了根据本公开实施例的对象数据同步方法的流程图；
[0022]图3示意性示出了根据本公开获取实际数据的流程图；
[0023]图4示意性示出了根据本公开实施例的将索引数据和实际数据同步到目标对象存储系统的流程图；
[0024]图5示意性示出了根据本公开实施例的另一实施例的对象数据同步方法的流程图；
[0025]图6示意性示出了根据本公开实施例的对象数据同步装置的结构框图；
[0026]图7示意性示出了根据本公开实施例的另一对象数据同步装置的结构框图；
[0027]图8示意性示出了根据本公开实施例的适于实现对象数据同步的方法的电子设备的方框图。
具体实施方式
[0028]以下，将参照附图来描述本公开的实施例。但是应该理解，这些描述只是示例性的，而并非要限制本公开的范围。在下面的详细描述中，为便于解释，阐述了许多具体的细节以提供对本公开实施例的全面理解。然而，明显地，一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外，在以下说明中，省略了对公知结构和技术的描述，以避免不必要地混淆本公开的概念。
[0029]在此使用的术语仅仅是为了描述具体实施例，而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在，但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
[0030]在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义，除非另外定义。应注意，这里使用的术语应解释为具有与本说明书的上下文相一致的含义，而不应以理想化或过于刻板的方式来解释。
[0031]在使用类似于“A、B和C等中至少一个”这样的表述的情况下，一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如，“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。在使用类似于“A、B或C等中至少一个”这样的表述的情况下，一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如，“具有A、B或C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。
[0032]在本公开的技术方案中，所涉及的用户个人信息的获取，存储和应用等，均符合相关法律法规的规定，采取了必要保密措施，且不违背公序良俗。
[0033]在本公开的技术方案中，在获取或采集用户个人信息之前，均获取了用户的授权或同意。
[0034]本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种对象数据同步方法，包括：获取待同步对象的索引数据；根据所述索引数据，从与所述待同步对象对应的对象存储系统中获取与所述索引数据对应的实际数据；以及向目标对象存储系统发送待同步对象的所述索引数据和所述实际数据，完成对所述待同步对象的同步，其中，所述待同步对象包括所述索引数据和所述实际数据。2.根据权利要求1所述的方法，其中，所述获取待同步对象的索引数据包括：从消息队列中获取所述待同步对象的索引数据，其中，存储于所述消息队列的索引数据是所述对象存储系统根据接收到所述待同步对象的数据存储请求中包括的索引数据，向所述消息队列发送的。3.根据权利要求2所述的方法，其中，所述目标对象存储系统是与目标数据同步组件对应的对象存储系统，其中，所述目标数据同步组件是订阅所述消息队列的数据同步组件。4.根据权利要求1或2所述的方法，其中，所述索引数据包括对象名称、对象存储位置索引数据和元数据；其中，所述根据所述索引数据，从与所述待同步对象对应的对象存储系统中获取与所述索引数据对应的实际数据包括：根据所述对象存储位置索引数据，确定与所述索引数据对应的实际数据在所述对象存储系统的存储位置；以及基于所述对象名称和所述元数据，从所述存储位置获取所述实际数据。5.根据...

【专利技术属性】
技术研发人员：李俊谦，张艺，袁一，张志海，
申请(专利权)人：中国工商银行股份有限公司，
类型：发明
国别省市：