大数据数据治理方法和装置制造方法及图纸

本发明专利技术公开了一种大数据数据治理方法和装置。其中，该方法包括：定义元数据；导入所述元数据；对所述元数据进行治理和分析，得到分析结果；至少根据所述分析结果得到元数据图谱。本发明专利技术解决了现有技术中还没有有效的大数据的数据治理方法的技术问题。

Data processing method and device for big data

The invention discloses a method and a device for managing large data data. The method includes: defining metadata; importing the metadata; managing and analyzing the metadata; obtaining the analysis results; obtaining the metadata schema at least according to the analysis results. The invention solves the technical problems of the existing data management methods which are not effective in the big data.

【技术实现步骤摘要】
大数据数据治理方法和装置
本专利技术涉及大数据领域，具体而言，涉及一种大数据数据治理方法和装置。
技术介绍
随着网络信息化时代的日益普遍，互联网、物联网、云计算的飞速发展以及各种类型的移动智能终端应用普及，互联网的边界和应用范围得到了极大地拓展，互联网(搜索、社交、电商)、移动互联(微博、微信、翼聊)、物联网(传感器、智慧地球)、电信行业(通话、上网、短信)等都在疯狂地产生着数据，促使当前人类社会的数据增长比以往任何一个时期都要快。据有关公司统计，在2006年，个人用户数据量刚刚迈进TB时代，全球一共新产生了约180EB的数据，到了2010年年底，全球数据量已经达到了1.14ZB。预计到2020年，全球电子设备存储的数据量将会达到35ZB，这个数据量是2006年全球电子数据存储量的20多万倍，这其中企业数据正在以55％的速度逐年增长。随着数据量越来越大、数据变化速度越来越快、数据类型越来越复杂、数据特性的逐步演变和发展，基于海量信息数据处理需求等诸多因素，诞生了一个全新的概念——大数据。大数据(BigData)，或称巨量资料，指的是所涉及的数据量规模庞大到无法通过目前主流软件工具，在本文档来自技高网...

【技术保护点】
一种大数据数据治理方法，其特征在于，包括：定义元数据；导入所述元数据；对所述元数据进行治理和分析，得到分析结果；至少根据所述分析结果得到元数据图谱。

【技术特征摘要】
1.一种大数据数据治理方法，其特征在于，包括：定义元数据；导入所述元数据；对所述元数据进行治理和分析，得到分析结果；至少根据所述分析结果得到元数据图谱。2.根据权利要求1所述的方法，其特征在于，定义元数据，至少包括：定义元数据的数据源、质量维度、检核类别、数据质量衡量标准、检核方法、检核方法审核。3.根据权利要求1所述的方法，其特征在于，导入所述元数据，包括：根据预设模板导入所述元数据。4.根据权利要求3所述的方法，其特征在于，所述预设模板为Excel格式的文件，根据预设模板导入所述元数据，包括：将元模型中每个类型的所述元数据以及所述元数据之间的依赖关系导入所述预设模板的不同工作表中，其中，所述元模型为用于描述所述元数据的模型，至少包括所述元数据的类型。5.根据权利要求1所述的方法，其特征在于，对所述元数据进行治理至少包括：对所述元数据进行维护、查询、导出、版本管理、变更管理以及检核结果...

【专利技术属性】
技术研发人员：李建国，陶长连，郑建全，
申请(专利权)人：九次方大数据信息集团有限公司，
类型：发明
国别省市：北京,11