一种数据融合处理方法技术

技术编号:39489152 阅读:11 留言:0更新日期:2023-11-24 11:11
本发明专利技术涉及一种数据融合处理方法

【技术实现步骤摘要】
一种数据融合处理方法、处理装置、设备及介质


[0001]本专利技术涉及电网
,尤其是指一种数据融合处理方法

处理装置

设备及介质


技术介绍

[0002]目前,电网公司的数据中台中,营销
、PMS、
用采等核心业务系统数据已完成汇聚,可覆盖人资

财务

物资

设备


10
大业务域,核心数据已逐步完成归集,构建了源端数据目录

中台数据目录

数据分析服务目录等,可支撑综合能源平台

双碳

复工复产等重点应用场景

[0003]但是,上述数据中台中,目前主要存在以下几个方面问题:
[0004]1、
数据融合有限,缺少权威数据源的识别

缺少数据关联性识别

数据融合有限,数据整合不足

[0005]2、
敏捷分析应用支撑能力不足,数据接入中台后,数据仍以
3NF
组织形式为主,不利于建立联机事务分析,敏捷分析应用支撑能力不足

[0006]3、
数据标准化需进一步完善,数据应用以部门或项目为单位各自建设,元数据

维度数据

指标等无法形成标准,复用化程度底,应用建设周期长


技术实现思路
<br/>[0007]为了解决上述技术问题,本专利技术提供了一种数据融合处理方法

处理装置

设备及介质,所述数据融合处理方法用于解决目前电网数据中台中数据融合有限

数据无法标准化的问题

[0008]为实现上述目的,本专利技术提供一种数据融合处理方法,用于对电网企业的数据中台进行数据融合处理;所述数据融合处理方法包括数据融合模型建设方法,其包括:
[0009]S2
获取所述数据中台的多个核心业务系统,并从所有核心业务系统中获取数据消费端的热点引用信息;
[0010]S3
根据所述热点引用信息生成对应的数据融合模型,用于支撑中台数仓各层数据组织逻辑

[0011]进一步的,所述数据融合模型建设方法包括对象关系模型生成方法;所述对象关系模型生成方法包括以下至少之一:
[0012]在所述数据中台中识别核心业务表

识别权威数据源表

明确数据关系

明确数据流转或交换逻辑

[0013]进一步的,所述数据融合模型建设方法包括统一维度模型生成方法;所述统一维度模型生成方法包括以下至少之一:
[0014]在所述数据中台中确认业务过程

数据粒度

维度和度量;在所述数据中台中建设统一维度表;在所述数据中台中建立业务事实表

[0015]进一步的,所述数据融合模型建设方法包括指标体系与汇总宽表生成方法;所述
指标体系与汇总宽表生成方法包括以下至少之一:
[0016]在所述数据中台中面向管理分析及业务应用建模,明确计算规则

统计逻辑

业务口径

[0017]进一步的,
S2
具体包括:
[0018]从多个维度对所有核心业务系统的数据引用信息进行分析

获取所述热点引用信息;其中,所述多个维度包括核心业务内在联系

中台数据表被申请热度

[0019]进一步的,在所述数据融合模型建设方法之前,所述数据融合处理方法还包括顶层业务分析方法,其包括:
[0020]S1
按照预设数据类型获取所述数据中台的核心信息分布情况信息

以及所有核心业务系统的数据共享交互情况信息;其中,所述预设数据类型包括主数据

事务数据

管理分析数据

[0021]进一步的,在所述数据融合模型建设方法之后,所述数据融合处理方法还包括:
[0022]根据所述数据融合模型对所述数据中台进行数据开发;
[0023]根据所述数据融合模型对所述数据中台的开发数据进行数据服务发布或数据集封装

[0024]本专利技术还提供一种数据融合处理装置,用于实现前述所述的数据融合处理方法,所述数据融合处理装置包括数据融合模型建设单元,其包括:
[0025]热点引用信息获取单元,其用于:获取所述数据中台的多个核心业务系统,并从所有核心业务系统中获取数据消费端的热点引用信息;
[0026]数据融合模型生成单元,其用于:根据所述热点引用信息生成对应的数据融合模型,用于支撑中台数仓各层数据组织逻辑

[0027]本专利技术的上述技术方案,相比现有技术具有以下技术效果:
[0028]本专利技术中,先获取数据中台中所有核心业务系统对应的热点引用信息,然后据此生成对应的数据融合模型,从而便于对中台数仓的各层数据进行数据处理;
[0029]其中,数据融合模型可包括:对象关系模型

统一维度模型

指标体系
&amp;
汇总宽表;
[0030]由此,通过上述数据融合模型建设方法,可对数据进行可靠的数据融合,可通过沉淀共性数据来进行敏捷分析,并可进一步完善数据标准

实现数据的高复用性

附图说明
[0031]为了更清楚地说明本专利技术实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本专利技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图

[0032]图1是本专利技术实施例一中数据融合处理方法的流程示意图;
[0033]图2是本专利技术实施例二中数据融合处理装置的结构框图

具体实施方式
[0034]为使本专利技术的目的

技术方案和优点更加清楚,下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚

完整地描述,显然,所描述的实施例仅仅是本
专利技术一部分实施例,而不是全部的实施例

基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本专利技术保护的范围

[0035]实施例一:
[0036]如图1所示,本专利技术实施例提供一种数据融合处理方法,用于对电网企业的数据中台进行数据融合处理;数据融合处理方法包括数据融合模型建设方法,其包括:
[0037]S2
获取本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.
一种数据融合处理方法,其特征在于,用于对电网企业的数据中台进行数据融合处理;所述数据融合处理方法包括数据融合模型建设方法,其包括:
S2
获取所述数据中台的多个核心业务系统,并从所有核心业务系统中获取数据消费端的热点引用信息;
S3
根据所述热点引用信息生成对应的数据融合模型,用于支撑中台数仓各层数据组织逻辑
。2.
根据权利要求1所述的数据融合处理方法,其特征在于,所述数据融合模型建设方法包括对象关系模型生成方法;所述对象关系模型生成方法包括以下至少之一:在所述数据中台中识别核心业务表

识别权威数据源表

明确数据关系

明确数据流转或交换逻辑
。3.
根据权利要求1所述的数据融合处理方法,其特征在于,所述数据融合模型建设方法包括统一维度模型生成方法;所述统一维度模型生成方法包括以下至少之一:在所述数据中台中确认业务过程

数据粒度

维度和度量;在所述数据中台中建设统一维度表;在所述数据中台中建立业务事实表
。4.
根据权利要求1所述的数据融合处理方法,其特征在于,所述数据融合模型建设方法包括指标体系与汇总宽表生成方法;所述指标体系与汇总宽表生成方法包括以下至少之一:在所述数据中台中面向管理分析及业务应用建模,明确计算规则

统计逻辑

业务口径
。5.
根据权利要求1所述的数据融合处理方法,其特征在于,
S2
具体包括:从多个维度对所有核心业务系统的数据引用信息进行分析

获取所述热点引用信息;其中,所述多个维度包括核心业务...

【专利技术属性】
技术研发人员:覃文闯王超拓广忠葛树峰李荣让蔡荣玲石杨金玲玲王来刚李欣怡姚艳丽温馨张海明姜蕴洲曲洪泽
申请(专利权)人:国家电网有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1