一种基于容器技术的元数据构建方法、装置、介质及设备制造方法及图纸

本说明书提供了一种基于容器技术的元数据构建方法、装置、介质及设备，接收原始数据的元数据构建请求，确定该原始数据的参数信息。调用用于构建元数据的容器，将参数信息输入容器，以唤醒容器的客户端工具，并基于客户端工具选择相应元数据处理器，使容器获取原始数据以及根据所述原始数据构建对应的元数据。根据该容器构建的元数据，依据预设存储规则更新元数据索引表。通过容器将各元数据构建任务隔离，使得各元数据构建任务之间具有良好的资源隔离性。通过容器的管理与调度实现多线程高并发地执行元数据构建任务，提高元数据构建任务的构建效率的同时，提高系统的可用性和资源利用率，可以容易通过增加节点来水平扩展系统，以应对突发流量。

【技术实现步骤摘要】

本说明书涉及数据处理领域，尤其涉及一种基于容器技术的元数据构建方法、装置、介质及设备。

技术介绍

1、随着计算机技术的发展，元数据作为描述数据的数据，提供了关于数据的详细信息，有助于数据的管理和使用，极大的提高了数据使用的效率。因此，元数据构建的效率至关重要。

2、在现有技术中，通常通过裸机部署的方式构建元数据，如在裸机上运行元数据构建程序，直接利用底层硬件资源构建元数据等，通常都是通过单服务器上的单个服务来处理元数据构建请求。

3、但是，随着大数据的发展，对于某些需要高度动态的数据集，如，实时交易数据、传感器数据等，或需要实时监控的数据，如，系统性能监控数据等，用户需要元数据实时更新，以保证数据的使用效率，实现及时决策，导致元数据的构建和更新需求往往是高并发且低时延的。而现有的元数据构建方式难以高效地处理大量并发的元数据构建请求。因此，本说明书提供了一种基于容器技术的元数据构建方法、装置、介质及设备。

技术实现思路

1、本说明书提供一种基于容器技术的元数据构建方法、装置、介质及设备，本文档来自技高网...

【技术保护点】

1.一种基于容器技术的元数据构建方法，其特征在于，包括：

2.如权利要求1所述方法，其特征在于，所述参数信息还包括数据源类型，具体包括：

3.如权利要求1所述方法，其特征在于，所述元数据构建请求中携带所述原始数据的元数据的更新频率，所述方法还包括：

4.如权利要求3所述方法，其特征在于，根据所述容器构建的元数据，依据预设存储规则更新元数据索引表，具体包括：

5.如权利要求4所述方法，其特征在于，根据所述容器构建的元数据，依据预设存储规则更新元数据索引表，具体包括：

6.如权利要求1所述方法，其特征在于，根据所述容器构建的元数据，...

【技术特征摘要】

1.一种基于容器技术的元数据构建方法，其特征在于，包括：

2.如权利要求1所述方法，其特征在于，所述参数信息还包括数据源类型，具体包括：

3.如权利要求1所述方法，其特征在于，所述元数据构建请求中携带所述原始数据的元数据的更新频率，所述方法还包括：

4.如权利要求3所述方法，其特征在于，根据所述容器构建的元数据，依据预设存储规则更新元数据索引表，具体包括：

5.如权利要求4所述方法，其特征在于，根据所述容器构建的元数据，依据预设存储规则更新元数据索引表，具体包括：

6.如权利要求1所述方法，其特征在于，根据所述容器构...

【专利技术属性】
技术研发人员：张夏昭，王钧，陈昱宇，林富明，马奇，
申请(专利权)人：之江实验室，
类型：发明
国别省市：