分布式数据中心配置、数据采集组件配置方法及装置制造方法及图纸

本发明专利技术提供了分布式数据中心配置、数据采集组件的配置的方法及装置，其数据采集组件配置方法应用于指定的数据采集组件，所述指定的数据采集组件按照第一数据通信链路信息配置第一数据通信链路，所述第一数据通信链路信息由第一数据采集关系信息确定，具体包括如下步骤：若分布式数据中心配置获取数据采集关系修改信息，满足预设条件时：停止配置第一数据通信链路，并获取分布式数据中心发送的第二数据采集关系信息；基于第二数据采集关系信息确定第二据通信链路信息；按照第二据通信链路信息配置第二通信链路。通过本发明专利技术可以缓解现有技术中的数据采集组件的配置过程繁复，配置效率低下技术问题。低下技术问题。低下技术问题。

【技术实现步骤摘要】
分布式数据中心配置、数据采集组件配置方法及装置


[0001]本专利技术实施例涉及数据采集
，尤其涉及一种分布式数据中心配置、数据采集组件配置方法及装置。

技术介绍

[0002]在数据采集与数据管理的过程中，通过数据采集组件进行配置，让数据采集组件执行对数据的操作，在此过程中，在数据采集组件的配置方式均采用静态配置方法，即采用配置文件。静态配置方法是对配置文件的数据进行抽取和写入。
[0003]然而，数据采集组件不能动态获取数据采集关系信息，同时，当节点动态扩容时，需要在每个节点建立静态配置文件。因此，数据采集组件的配置过程繁复，配置效率低下，运维成本高。

技术实现思路

[0004]本专利技术实施例提供了一种分布式数据中心配置、数据采集组件的配置的方法及装置，以缓解现有技术中的数据采集组件的配置过程繁复，配置效率低下技术问题。
[0005]本专利技术提供了一种数据采集组件配置方法，应用于指定的数据采集组件，所述指定的数据采集组件按照第一数据通信链路信息配置第一数据通信链路，所述第一数据通信链路信息由第一数据采集关系信息确定，具体包括如下步骤：
[0006]若分布式数据中心配置获取数据采集关系修改信息，满足预设条件时：
[0007]停止配置第一数通信链路，并获取分布式数据中心发送的第二数据采集关系信息；
[0008]基于第二数据采集关系信息确定第二据通信链路信息；
[0009]按照第二据通信链路信息配置第二通信链路；
[0010]其中，所述第一数据采集关系信息按照数据采集关系修改信息修改后生成第二数据采集关系信息；
[0011]所述数据采集关系修改信息用于对所述第一数据采集关系信息进行修改。
[0012]一种可能的方式是，所述第一数据通信链路信息包括由第一数据采集关系信息确定的数据源头、数据目标源以及数据源头与数据目标源之间的数据通道；
[0013]所述第二数据通信链路信息包括由第二数据采集关系信息确定的数据源头、数据目标源以及数据源头与数据目标源之间的数据通道。
[0014]一种可能的方式是，分布式数据库服从于所述分布式数据中心的管理，所述分布式数据库设置有多个节点，所述数据源头包括第一节点以及对第一节点获取的数据所执行的操作，所述数据目标源包括第二节点以及对第二节点输出的数据所执行的操作；
[0015]所述第一节点为数据采集组件获取数据的节点；
[0016]所述第二节点为数据采集组件输出数据的节点，
[0017]所述第一节点以及所述第二节点为分布式数据库设置的节点。
[0018]一种可能的方式是，所述预设条件包括：所述分布式数据中心管理的数据库一半以上的节点按照数据分布式数据中心获取的采集关系修改信息修改完成。
[0019]一种可能的方式是，所述第一数据采集关系信息包括第一Host、第一配置集、第一命名空间以及第一用户组；
[0020]所述数据采集关系修改信息包括对Host、配置集、命名空间以及用户组的修改信息；
[0021]所述第二数据采集关系信息包括第二Host、第二配置集、第二命名空间以及第二用户；
[0022]所述第二Host为按照所述数据采集关系修改信息修改后的第一Host；
[0023]所述第二配置集为按照所述数据采集关系修改信息修改后的第一配置集；
[0024]所述第二命名空间为按照所述数据采集关系修改信息修改后的第一命名空间。
[0025]第二方面，本专利技术提供了一种分布式数据中心配置方法，应用于分布式数据中心，所述分布式数据中心按照第一数据采集关系信息配置数据采集关系，所述分布式数据中心管理至少一个分布式数据库，具体包括如下步骤：
[0026]若获取数据采集关系修改信息，则使其管理的分布式数据库按照数据采集关系修改信息对第一数据采集关系信息修改；
[0027]当满足预设条件时：
[0028]则确定第二数据采集关系信息；
[0029]将所述第二数据采集关信息发送至指定的数据采集组件；
[0030]其中，所述第二数据采集关系信息为按照数据采集关系修改信息修改后第一数据采集关系信息；
[0031]所述数据采集关系修改信息用于对所述第一数据采集关系信息进行修改。
[0032]一种可能的方式是，所述分布式数据中心管理的分布式数据库设置有多个节点，所述预设条件包括：所述分布式数据中心管理的数据库一半以上的节点按照数据分布式数据中心获取的采集关系修改信息修改完成，所述对其管理的分布式数据库按照数据采集关系修改信息对第一数据采集关系信息修改的步骤包括：
[0033]基于数据采集关系修改信息生成数据采集关系修改请求；
[0034]将数据采集关系修改请求发送至其管理的分布式数据库的所有节点；
[0035]其中，所述数据数据采集关系修改请求：用于使分布式数据库中接收所述数据采集关系修改请求的节点按照所述数据采集关系修改信息进行修改。
[0036]一种可能的方式是，所述第一数据采集关系信息包括第一Host、第一配置集、第一命名空间以及第一用户组；
[0037]所述数据采集关系修改信息包括对Host、配置集、命名空间以及用户组的修改信息；
[0038]所述第二数据采集关系包括第二Host、第二配置集、第二命名空间以及第二用户；
[0039]利用Host值、配置集值、命名空间值以及用户组值确定指定的数据采集组件；
[0040]所述第二Host为按照所述数据采集关系修改信息修改后的第一Host；
[0041]所述第二配置集为按照所述数据采集关系修改信息修改后的第一配置集；
[0042]所述第二命名空间为按照所述数据采集关系修改信息修改后的第一命名空间；
[0043]所述第二用户组为按照所述数据采集关系修改信息修改后的第一用户组。
[0044]第三方面，本专利技术提供了一种数据采集组件配置装置，应用于指定的数据采集组件，所述指定的数据采集组件按照第一数据通信链路信息配置数第一数据通信链路，所述第一数据通信链路信息由第一数据采集关系信息确定，若分布式数据中心配置获取数据采集关系修改信息，满足预设条件时，包括：
[0045]接收模块：用于停止配置第一数据通信链路，并获取分布式数据中心发送的第二数据采集关系信息；
[0046]通信链路信息确定模块：用于基于第二数据采集关系信息确定第二据通信链路信息；
[0047]配置模块：用于按照第二据通信链路信息配置第二通信链路；
[0048]其中，所述第一数据采集关系信息按照数据采集关系修改信息修改后生成第二数据采集关系信息；
[0049]所述数据采集关系修改信息用于对所述第一数据采集关系信息进行修改。
[0050]第四方面，本专利技术提供了一种分布式数据中心配置装置，应用于分布式数据中心，所述分布式数据中心按照第一数据采集关系信息配置数据关系，所述本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据采集组件配置方法，其特征在于，应用于指定的数据采集组件，所述指定的数据采集组件按照第一数据通信链路信息配置第一数据通信链路，所述第一数据通信链路信息由第一数据采集关系信息确定，具体包括如下步骤：若分布式数据中心配置获取数据采集关系修改信息，满足预设条件时：停止配置第一数据通信链路，并获取分布式数据中心发送的第二数据采集关系信息；基于第二数据采集关系信息确定第二据通信链路信息；按照第二据通信链路信息配置第二通信链路；其中，所述第一数据采集关系信息按照数据采集关系修改信息修改后生成第二数据采集关系信息；所述数据采集关系修改信息用于对所述第一数据采集关系信息进行修改。2.根据权利要求1所述的方法，其特征在于，所述第一数据通信链路信息包括由第一数据采集关系信息确定的数据源头、数据目标源以及数据源头与数据目标源之间的数据通道；所述第二数据通信链路信息包括由第二数据采集关系信息确定的数据源头、数据目标源以及数据源头与数据目标源之间的数据通道。3.根据权利要求2所述的方法，其特征在于，分布式数据库服从于所述分布式数据中心的管理，所述分布式数据库设置有多个节点，所述数据源头包括第一节点以及对第一节点获取的数据所执行的操作，所述数据目标源包括第二节点以及对第二节点输出的数据所执行的操作；所述第一节点为数据采集组件获取数据的节点；所述第二节点为数据采集组件输出数据的节点，所述第一节点以及所述第二节点为分布式数据库设置的节点。4.根据权利要求3所述的方法，其特征在于，所述预设条件包括：所述分布式数据库一半以上的节点按照数据分布式数据中心获取的采集关系修改信息修改完成。5.根据权利要求1至4任一项所述的方法，其特征在于，所述第一数据采集关系信息包括第一Host、第一配置集、第一命名空间以及第一用户组；所述数据采集关系修改信息包括对Host、配置集、命名空间以及用户组的修改信息；所述第二数据采集关系信息包括第二Host、第二配置集、第二命名空间以及第二用户；所述第二Host为按照所述数据采集关系修改信息修改后的第一Host；所述第二配置集为按照所述数据采集关系修改信息修改后的第一配置集；所述第二命名空间为按照所述数据采集关系修改信息修改后的第一命名空间。6.一种分布式数据中心配置方法，应用于分布式数据中心，其特征在于，所述分布式数据中心按照第一数据采集关系信息配置数据采集关系，分布式数据库服从于所述分布式数据中心，应用于所述分布式数据中心，具体包括如下步骤：若获取数据采集关系修改信息，则使分布式数据库按照数据采集关系修改信息对第一数据采集关系信息修改；当满足预设条件时：则确定第二数据采集关系信息；
将所述第二数据采集关信息发送至指定的数据采集组件；其中，所述第二数据采集关系信息为按照数据采集关系修改信息修改后第一数据采集关系信息；所述数据采集关系修改...

【专利技术属性】
技术研发人员：何快洛，
申请(专利权)人：成都赛力斯科技有限公司，
类型：发明
国别省市：