数据处理方法、装置、设备及存储介质制造方法及图纸

技术编号:36423126 阅读:14 留言:0更新日期:2023-01-20 22:31
本申请公开了一种数据处理方法、装置、设备及存储介质。涉及数据处理技术领域。该数据处理方法包括:按照预设技术条件,获取每个数据项在N个领域中的业务概念信息,预设技术条件包括规范条件和标准条件;根据每个数据项在N个领域中的业务概念信息,按照自顶而下的顺序构建模型框架;基于模型框架,建立N个领域的每个领域中的每个数据项与预设源系统中的业务实体的映射关系,得到每个领域的数据子模型;在确定N个领域中的数据项为跨领域数据项的情况下,调整每个跨领域数据项的数据子模型,得到目标数据模型,如此,解决了现有技术中不同部门系统中的数据无法共享,导致数据交互效率低成本高的问题。效率低成本高的问题。效率低成本高的问题。

【技术实现步骤摘要】
数据处理方法、装置、设备及存储介质


[0001]本申请属于数据处理
,尤其涉及一种数据处理方法、装置、设备及存储介质。

技术介绍

[0002]竖井式互联网技术(Internet Technology,IT)架构带来的直接问题是数据间缺乏关联性,各个服务系统之间的数据库彼此无法兼容,即又称为“数据孤岛”。
[0003]在相关技术中,针对如服务平台、实体商户等组织机构来说,组织机构中不同的部门会通过部门系统自己的数据库独立存储部门数据,如此,使得同一组织机构下的不同部门系统之间的数据无法共享,导致不同部门下的用户之间无法及时感知组织机构的数据分布与更新情况,影响数据交互效率。以及,由于不同部门都会在自己的角度对数据进行理解和定义,使得一些相同的数据被赋予了不同的含义,无形中加大了跨部门的数据交互成本。

技术实现思路

[0004]本申请提供一种数据处理方法、装置、设备及存储介质,用以解决现有技术中不同部门系统中的数据无法共享,导致数据交互效率低成本高的问题。
[0005]第一方面,本申请实施例提供一种数据处理方法,包括:
[0006]按照预设技术条件,获取每个数据项在N个领域中的业务概念信息,预设技术条件包括规范条件和标准条件,N为大于1的正整数;
[0007]根据每个数据项在N个领域中的业务概念信息,按照自顶而下的顺序构建模型框架;
[0008]基于模型框架,建立N个领域的每个领域中的每个数据项与预设源系统中的业务实体的映射关系,得到每个领域的数据子模型;r/>[0009]在确定N个领域中的数据项为跨领域数据项的情况下,调整每个跨领域数据项的数据子模型,得到目标数据模型。
[0010]第二方面,本申请实施例提供一种数据处理装置,包括:
[0011]获取模块,用于按照预设技术条件,获取每个数据项在N个领域中的业务概念信息,预设技术条件包括规范条件和标准条件,N为大于1的正整数;
[0012]构建模块,用于根据每个数据项在N个领域中的业务概念信息,按照自顶而下的顺序构建模型框架;
[0013]建立模块,用于基于模型框架,建立N个领域的每个领域中的每个数据项与预设源系统中的业务实体的映射关系,得到每个领域的数据子模型;
[0014]调整模块,用于在确定N个领域中的数据项为跨领域数据项的情况下,调整每个跨领域数据项的数据子模型,得到目标数据模型。
[0015]第三方面,本申请实施例提供了一种计算设备,该计算设备包括:处理器以及存储有计算机程序指令的存储器;
[0016]处理器执行计算机程序指令时实现如第一方面所示的数据处理方法。
[0017]第四方面,本申请实施例提供了一种计算机存储介质,计算机存储介质上存储有计算机程序指令,计算机程序指令被处理器执行时实现如第一方面所示的数据处理方法。
[0018]第五方面,本申请实施例提供了一种芯片,芯片包括处理器和通信接口,通信接口和处理器耦合,处理器用于运行程序或指令,实现如第一方面所示的数据处理方法。
[0019]第六方面,本申请实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如第一方面所示的数据处理方法。
[0020]本申请实施例提供的数据处理方法、装置、设备及存储介质,按照预设技术条件,获取每个数据项在N个领域中的业务概念信息,预设技术条件包括规范条件和标准条件,N为大于1的正整数,接着,根据每个数据项在N个领域中的业务概念信息,按照自顶而下的顺序构建模型框架,然后,基于模型框架,建立N个领域的每个领域中的每个数据项与预设源系统中的业务实体的映射关系,得到每个领域的数据子模型,并在确定N个领域中的数据项为跨领域数据项的情况下,调整每个跨领域数据项的数据子模型,得到目标数据模型。这样,采用业务实体建模和粒度建模方式,将不同渠道、不同数据来源的竖井式、相对独立的系统数据进行规范提取、打通和融合,通过逐级细化,形成层次清晰的目标数据模型。如此,能够有效组织来源多样的业务数据,统一业务数据集成,保证数据的完整性、准确性、一致性和易用性,从而提高数据交互效率,推动数据的整合与共建共享,让数据能够贯通于不同互联网系统之间,解决数据孤岛的问题,进而以结构化的方式描述在业务运作和管理决策中所需要的各类信息及其关系,让数据使用者能清晰地看到数据资产全景,便捷应用数据资源,降低数据交互成本。
附图说明
[0021]为了更清楚地说明本申请实施例的技术方案,下面将对本申请实施例中所需要使用的附图作简单的介绍,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0022]图1为本申请实施例提供的一种数据处理方法的流程图;
[0023]图2为本申请实施例提供的一种数据处理方法的一个实施例的数据模型结构示意图;
[0024]图3为本申请实施例提供的一种数据处理方法的另一个实施例的数据模型结构示意图;
[0025]图4是本申请一个实施例提供的数据处理装置的结构示意图;
[0026]图5是本申请一个实施例提供的数据处理设备的结构示意图。
具体实施方式
[0027]下面将详细描述本申请的各个方面的特征和示例性实施例,为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及具体实施例,对本申请进行进一步详细描述。应理解,此处所描述的具体实施例仅意在解释本申请,而不是限定本申请。对于本领域技术人员来说,本申请可以在不需要这些具体细节中的一些细节的情况下实施。下面对实施例的描述仅仅是为了通过示出本申请的示例来提供对本申请更好的理解。
[0028]需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括
……”
限定的要素,并不排除在包括要素的过程、方法、物品或者设备中还存在另外的相同要素。
[0029]本申请技术方案中对数据的获取、存储、使用、处理等均符合国家法律法规的相关规定。
[0030]近年来,随着互联网系统信息化建设不断发展,数据分析相关需求的应用程度也越来越高,尤其是,政务系统的竖井式IT架构带来的直接问题是“数据孤岛”,IT系统中的数据语言不统一,不同IT系统之间的数据不贯通,条块分割、各自存储,使得政务数据资源散落在政务系统的多个业务系统中,部门管理人员和业务人员无法及时感知到数据的分布与更新情况,缺乏部门内部业务数据的统一完整视图,难以从整体的视角了解数据现状。如此,使得同一组织机构下的不同部门系统之间的数本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法,其特征在于,包括:按照预设技术条件,获取每个数据项在N个领域中的业务概念信息,所述预设技术条件包括规范条件和标准条件,N为大于1的正整数;根据所述每个数据项在N个领域中的业务概念信息,按照自顶而下的顺序构建模型框架;基于所述模型框架,建立所述N个领域的每个领域中的每个数据项与预设源系统中的业务实体的映射关系,得到所述每个领域的数据子模型;在确定所述N个领域中的数据项为跨领域数据项的情况下,调整每个跨领域数据项的数据子模型,得到目标数据模型。2.根据权利要求1所述的方法,其特征在于,所述按照预设技术条件,获取每个数据项在N个领域中的业务概念信息,包括:按照预设技术条件,分别在信息分类、分类模式、分类与代码、数据框架和基本数据元中识别业务对象;将所述业务对象、与所述业务对象对应的行业标准和业务生命周期确定为所述每个数据项在N个领域中的业务概念信息。3.根据权利要求1所述的方法,其特征在于,所述基于所述模型框架,建立所述N个领域的每个领域中的每个数据项与预设源系统中的业务实体的映射关系,得到所述每个领域的数据子模型之前,所述方法还包括:按照自底而上的顺序,遍历所述预设源系统,得到所述预设源系统中满足所述预设技术条件的多个物理表;将所述多个物理表确定为用于反映业务本质的业务实体。4.根据权利要求1所述的方法,其特征在于,所述业务实体包括核心实体和从属实体;所述在确定所述N个领域中的数据项为跨领域数据项的情况下,调整每个跨领域数据项的数据子模型,得到目标数据模型之前,所述方法还包括:对所述N个领域中任意两个领域中的业务对象进行识别,得到所述业务对象在所述N个领域中的识别结果;在所述识别结果表示所述任意两个领域中包括所述业务对象的情况下,对比在所述任意两个领域中业务对象的数据属性,得到对比结果;在所述对比结果表示确定所述业务对象在N个领域中的数据属性关联的情况下,确定所述数据项为跨领域数据项。5.根据权利要求1所述的方法,其特征在于,所述调整每个跨领域数据项的数据子模型,得到目标数据模型,包括:对所述每个跨领域数据项的数据子模型中不同领域的相同数据粒度的数据属性进行合并同类项处理,得到目标数据模型。6.根据权利要求1

...

【专利技术属性】
技术研发人员:漆光明何少东
申请(专利权)人:建信金融科技有限责任公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1