一种大数据管理工具实现方法及装置制造方法及图纸

本发明专利技术涉及大数据领域，具体提供了一种大数据管理工具实现方法及装置，具有如下步骤：S1、Rest‑server提供统一的规范化接口；S2、管理端对Rest‑server接口进一步封装；S3、分布式数据库采用集群化部署方式；S4、源管理服务是支撑大数据管理工具的最小单元，按照统一规范开发，以微服务的形态运行，采用插件化部署；S5、包管理工具负责管理源管理服务的安装包；S6、认证服务负责管理各组件的服务认证及数据源账号管理。与现有技术相比，本发明专利技术能够解决大数据平台管理员、大数据开发者在管理和接入多源多版本大数据组件时繁琐而且不统一的问题。

【技术实现步骤摘要】

本专利技术涉及大数据领域，具体提供一种大数据管理工具实现方法及装置。

技术介绍

1、随着信息化建设的发展，各行业各领域都在积极的进行大数据平台建设，迫切需要将各自新旧信息化系统中的各种数据源进行管理或接入到大数据平台中进行数据治理，以挖掘出数据价值。

2、信息化系统中数据的存储方式多种多样，存储组件多种多样，可分为大数据型、关系型、非关系型数等，所用数据组件的版本也新旧不一。往往新版本驱动不再对过早的大数据组件进行支持，或者每种驱动仅支持特定版本的大数据组件。这就给各种信息化系统数据源管理及接入到大数据平台带来障碍。给大数据管理者、开发者带来困难。当前大数据管理软件或多或少存在一下问题。

3、1、大数据管理入口不统一，需要较大的工作量进行二次开发，且接口不统一；

4、2、仅支持特定版本数据组件的管理，因驱动冲突问题无法支持对同一数据源多版本同时管理，使存储在旧版本大数据组件中的数据无法统一管理。

5、3、仅支持对几类数据组件的管理，无弹性部署或插件化部署能力，使小众数据组件得不到有效管理。

6、4本文档来自技高网...

【技术保护点】

1.一种大数据管理工具实现方法，其特征在于，具有如下步骤：

2.根据权利要求1所述的一种大数据管理工具实现方法，其特征在于，在步骤S1中，包括：

3.根据权利要求2所述的一种大数据管理工具实现方法，其特征在于，在步骤S2中，管理端对Rest-server接口进一步封装，提供UI界面、REST、CLI命令行和SDK形式提供给客户。

4.根据权利要求3所述的一种大数据管理工具实现方法，其特征在于，在步骤S3中，分布式数据库采用集群化部署方式，记录管理服务包清单、服务状态、服务在集群中位置，数据源类型、版本、配置、状态和组件认证权限信息。

5.根...

【技术特征摘要】

1.一种大数据管理工具实现方法，其特征在于，具有如下步骤：

2.根据权利要求1所述的一种大数据管理工具实现方法，其特征在于，在步骤s1中，包括：

3.根据权利要求2所述的一种大数据管理工具实现方法，其特征在于，在步骤s2中，管理端对rest-server接口进一步封装，提供ui界面、rest、cli命令行和sdk形式提供给客户。

4.根据权利要求3所述的一种大数据管理工具实现方法，其特征在于，在步骤s3中，分布式数据库采用集群化部署方式，记录管理服务包清单、服务状态、服务在集群中位置，数据源类型、版本、配置、状态和组件认证权限信息。

5.根据权利要求4所述的一种大...

【专利技术属性】
技术研发人员：宋大川，潘心冰，刘豹，
申请(专利权)人：浪潮云信息技术股份公司，
类型：发明
国别省市：