大数据环境下基于多状态实现数据优化管理功能的系统及方法技术方案

技术编号:20992620 阅读:21 留言:0更新日期:2019-04-29 22:35
本发明专利技术涉及一种大数据环境下基于多状态实现数据优化管理功能的系统,包括数据结构准备模块,用于增加符合发布库数据结构的模型信息,并在发布库中同步表信息以及字段配置、展现方式、数据模板和权限;数据准备模块,用于在已有的数据模型模板下添加业务数据;梳理定义数据状态模块,用于根据数据的走向定义满足、符合数据的状态;数据管理模块,用于对发布库中已存储的数据进行操作、管理,实现不同状态的切换,满足数据使用需求。本发明专利技术还涉及一种大数据环境下基于多状态的实现数据优化管理功能的方法。采用了该系统及方法,定义尽可能完整的数据状态,从而在数据使用的过程中更加真实、更加准确;同时降低因数据状态不足、缺失等原因而造成的影响。

System and Method of Data Optimal Management Based on Multi-state in Large Data Environment

The present invention relates to a system for optimizing data management function based on multi-state in large data environment, including data structure preparation module, which is used to increase model information conforming to the data structure of publishing library, and to synchronize table information in Publishing Library with field configuration, presentation mode, data template and authority; data preparation module, which is used to add industry under existing data model template. Data management module is used to operate and manage the stored data in the publishing library, realize the switching of different states, and meet the needs of data usage. The invention also relates to a method for realizing data optimal management function based on multi-state in large data environment. The system and method are used to define the data state as complete as possible, so as to be more real and accurate in the process of data use, and to reduce the impact caused by the lack of data state and other reasons.

【技术实现步骤摘要】
大数据环境下基于多状态实现数据优化管理功能的系统及方法
本专利技术涉及主数据管理领域,尤其涉及主数据状态管理领域,具体是指一种大数据环境下基于多状态实现数据优化管理功能的系统及方法。
技术介绍
近年来,毫无疑问,各行各业因为大幅爆发的数据而正变得蒸蒸日上,几乎所有行业都或多或少的受到这一巨变的影响。数据的管理和应用,不仅仅在企业中得到重视,国家也制定了相关政策,来促进、保护和发展各领域的相关数据行业发展,数据已有当代“石油”的美誉。因此,对数据的管理手段和方法成为高效使用数据的重要关注点,主数据通常是以编辑、生效、启用和停用状态作为管理数据的一种方法,通过实际业务需要对数据进行增加、编辑删除、可用和不可用等操作,实现简单使用数据的目的。但是,当前简单的管理手段和方法已经不适合当前的发展趋势,正常情况下,一个模型版本下经常会出现成千上万条甚至更多的数据,在业务场景十分复杂的当下,简单的数据状态无法满足高频、复杂使用数据的需求,特别是更多场景业务下,使用当前的数据管理方法无法满足实际业务需要,无法发挥数据应有的价值。针对主数据模型版本下的数据管理,现有技术通常是在一个模型版本下对数据进行简单的管理,根据业务需求增加、编辑和生效满足实际需要。1、增加符合发布库数据结构的模型信息并在发布库中同步表信息;2、配置展现方式、字段配置、数据模板、数据权限;3、在模型模板下增加数据;4、对编辑状态的数据可重复进行编辑;5、对编辑状态的数据进行生效操作;6、对生效状态的数据进行停用、启用操作;7、重复1~6可不断增加新的业务模型、模型版本、业务数据。根据以上步骤创建出的模型版本和业务数据,管理和操作都是非常简单的,可以满足简单的数据管理需求,数据列表的效果图如下:目前主数据平台对数据的管理从数据状态的角度上来看过于简单,不利于数据的管理和使用,特别是在大数据背景下,一个模型版本下经常会出现成千上万条甚至更多的数据,在业务场景十分复杂的当下,简单的数据状态无法满足高频、复杂使用数据的需求,特别是更多场景业务下,使用当前的数据管理方法无法满足实际业务需要,通过定义尽可能完整的、适应实际需求的状态,达到细粒度、实用的大数据环境下对主数据的管理,以适应复杂的场景,发挥数据的价值。
技术实现思路
本专利技术的目的是克服了上述现有技术的缺点,提供了一种满足灵活选择数据状态、数据使用效率、适用范围较为广泛的大数据环境下基于多状态实现数据优化管理功能的系统及方法。为了实现上述目的,本专利技术的大数据环境下基于多状态实现数据优化管理功能的系统及方法如下:该大数据环境下基于多状态的实现数据优化管理功能的方法,其主要特点是,所述的系统包括:数据结构准备模块,用于增加符合发布库数据结构的模型信息,并在发布库中同步表信息以及字段配置、展现方式、数据模板和权限;数据准备模块,与所述的数据结构准备模块相连接,用于在已有的数据模型模板下添加业务数据;梳理定义数据状态模块,与所述的数据准备模块相连接,用于根据数据的走向定义满足、符合数据的状态;数据管理模块,与所述的梳理定义数据状态模块相连接,用于对发布库中已存储的数据进行操作、管理,实现不同状态的切换,满足数据使用需求。较佳地,所述的数据结构准备模块中同步的表包括模型表、模型版本表、模型字段表和模型字段版本表。较佳地,所述的数据准备模块的添加方式包括直接切库、手动增加数据和批量导入。较佳地,所述的梳理定义数据状态模块定义的状态包括编辑、生效、停用、启用、历史、可申请、不可申请、审核中、通过、作废、合并、冻结、解冻和异常。较佳地,所述的系统异常状态包括业务异常状态和系统异常状态。该利用上述系统实现大数据环境下基于多状态的数据优化管理控制的方法,其主要特点是,所述的方法包括以下步骤:(1)所述的数据结构准备模块增加模型信息,并将表信息同步到发布库;(2)所述的数据准备模块手动添加、批量导入,并读取生产库信息;(2)所述的梳理定义数据状态模块根据业务需求定义数据状态;(3)所述的数据管理模块操作管理发布库中的数据,实现不同状态中数据状态的切换。采用了本专利技术的大数据环境下基于多状态实现数据优化管理功能的系统及方法,由于在使用数据的过程中分析数据在使用的过程中可能出现的情况,定义尽可能完整的数据状态,从而在数据使用的过程中更加真实、更加准确;同时降低因数据状态不足、缺失等原因而造成的影响;另外可以在实际使用中适应更多的复杂场景,提高系统的可用性和用户体验度,创造更大的数据价值。附图说明图1为本专利技术的大数据环境下基于多状态实现数据优化管理功能的系统的结构图。图2为本专利技术的大数据环境下基于多状态实现数据优化管理功能的系统的数据定义状态关系示意图。图3为本专利技术的实现大数据环境下基于多状态的数据优化管理控制的方法的流程图。具体实施方式为了能够更清楚地描述本专利技术的
技术实现思路
,下面结合具体实施例来进行进一步的描述。本专利技术的该大数据环境下基于多状态实现数据优化管理功能的系统,其中,所述的系统包括:数据结构准备模块,用于增加符合发布库数据结构的模型信息,并在发布库中同步表信息以及字段配置、展现方式、数据模板和权限;数据准备模块,与所述的数据结构准备模块相连接,用于在已有的数据模型模板下添加业务数据;梳理定义数据状态模块,与所述的数据准备模块相连接,用于根据数据的走向定义满足、符合数据的状态;数据管理模块,与所述的梳理定义数据状态模块相连接,用于对发布库中已存储的数据进行操作、管理,实现不同状态的切换,满足数据使用需求。作为本专利技术的优选实施方式,所述的数据结构准备模块中同步的表包括模型表、模型版本表、模型字段表和模型字段版本表。作为本专利技术的优选实施方式,所述的数据准备模块的添加方式包括直接切库、手动增加数据和批量导入。作为本专利技术的优选实施方式,所述的梳理定义数据状态模块定义的状态包括编辑、生效、停用、启用、历史、可申请、不可申请、审核中、通过、作废、合并、冻结、解冻和异常。作为本专利技术的优选实施方式,所述的系统异常状态包括业务异常状态和系统异常状态。该利用上述系统实现大数据环境下基于多状态的数据优化管理控制的方法,所述的方法包括以下步骤:(1)所述的数据结构准备模块增加模型信息,并将表信息同步到发布库;(2)所述的数据准备模块手动添加、批量导入,并读取生产库信息;(2)所述的梳理定义数据状态模块根据业务需求定义数据状态;(3)所述的数据管理模块操作管理发布库中的数据,实现不同状态中数据状态的切换本专利技术的具体实施方式中,目前主数据平台对数据的管理从数据状态的角度上来看过于简单,不利于数据的管理和使用,本专利技术通过分析数据在使用的过程中可能出现的情况,梳理出数据的走向,整理出数据的状态,定义尽可能完整的、适应实际使用数据需求的数据状态,使得数据在使用的过程中更加真实、更加准确,降低因数据状态不足、缺失等原因而造成的影响,从而达到更细粒度、更实用的大数据环境下对主数据的管理,以便在项目实施、数据管理中灵活选择数据状态,提高数据使用效率。本专利技术通过分析数据在使用的过程中可能出现的情况,梳理出数据的走向,勾画出数据的状态图,定义尽可能完整的、适应实际使用数据需求的数据状态,使得数据在使用的过程中更加真实、更加准确,降低因数据状态不足、缺失等原因而本文档来自技高网
...

【技术保护点】
1.一种大数据环境下基于多状态实现数据优化管理功能的系统,其特征在于,所述的系统包括:数据结构准备模块,用于增加符合发布库数据结构的模型信息,并在发布库中同步表信息以及字段配置、展现方式、数据模板和权限;数据准备模块,与所述的数据结构准备模块相连接,用于在已有的数据模型模板下添加业务数据;梳理定义数据状态模块,与所述的数据准备模块相连接,用于根据数据的走向定义满足、符合数据的状态;数据管理模块,与所述的梳理定义数据状态模块相连接,用于对发布库中已存储的数据进行操作、管理,实现不同状态的切换,满足数据使用需求。

【技术特征摘要】
1.一种大数据环境下基于多状态实现数据优化管理功能的系统,其特征在于,所述的系统包括:数据结构准备模块,用于增加符合发布库数据结构的模型信息,并在发布库中同步表信息以及字段配置、展现方式、数据模板和权限;数据准备模块,与所述的数据结构准备模块相连接,用于在已有的数据模型模板下添加业务数据;梳理定义数据状态模块,与所述的数据准备模块相连接,用于根据数据的走向定义满足、符合数据的状态;数据管理模块,与所述的梳理定义数据状态模块相连接,用于对发布库中已存储的数据进行操作、管理,实现不同状态的切换,满足数据使用需求。2.根据权利要求1所述的大数据环境下基于多状态实现数据优化管理功能的系统,其特征在于,所述的数据结构准备模块中同步的表包括模型表、模型版本表、模型字段表和模型字段版本表。3.根据权利要求1所述的大数据环境下基于多状态实现数据优化管理功能的系统,其特征在于,所述的数据准备模...

【专利技术属性】
技术研发人员:徐明明
申请(专利权)人:普元信息技术股份有限公司
类型:发明
国别省市:上海,31

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1