一种电力营销服务系统数据中台设计方法技术方案

本发明专利技术公开了一种电力营销服务系统数据中台设计方法，包括：步骤1，数据汇聚：包含数据指标梳理、业务主数据梳理、企业级数据库表建立和规范更新，并构建电力营销服务系统的数据基础；步骤2，数据融合：将业务不同主题域进行数据组织，形成公共数据层模型，开展代码研发和部署运维；步骤3，数据萃取为上层服务提供数据基础；步骤4，分析结果沉淀；步骤5，数据服务提炼及全过程数据运营。该设计方法遵从相应的方法论、标准规范和要求，前后环节之间相互验证迭代。通过数据汇聚、融合、萃取后为数据服务提供数据支撑，通过数据服务和数据运营管理，实现数据价值挖掘，反向赋能业务。

A design method of data center of power marketing service system

【技术实现步骤摘要】
一种电力营销服务系统数据中台设计方法
本专利技术涉及电力营销
，尤其涉及一种电力营销服务系统数据中台设计方法。
技术介绍
现有的电力行业多种IT系统之间的层层壁垒使得公司内外部的各种信息无法有效流通，众多高价值数据也只能在自身系统的小圈子里转，无法在更大的格局和链条上发挥价值。在企业内，无论是专题、报表或取数，当前基本是烟囱式数据生产模式或者是项目制建设方式，导致数据知识得不到沉淀和持续发展，从而造成模型不能真正成为可重用的组件，无法支撑数据分析的快速响应和创新。电力营销信息系统运行多年沉淀的数据资源广泛分散在各个异构系统中，相关业务的数据模型和标准不统一，数据一致性和流通性较差，不能实现有效共享，无法最大限度地挖掘数据价值。企业中台核心包括业务中台和数据中台，支撑企业业务的数字化企业数据的业务化，构建企业的数字化运营能力，支撑企业业务的灵活迭代。企业中台不单指中台信息系统支撑，还包括与中台匹配的管理体系和标准。数据中台是指通过数据技术，对海量数据进行采集、计算、存储、加工，同时统一数据标准和口径，同时还包括构建数据中台过程中的所需要模型服务，算法服务，建设数据中台需要的组织、流程、标准和规范和管理制度等。数据中台把数据统一之后，会形成标准数据，再进行存储，形成大数据资产层，通过数据挖掘和分析工具实现数据服务能力，进而为客户或生态提供高效服务。同时这些服务跟企业的业务有较强的关联性，是这个企业独有的且能复用的，它是企业业务和数据的沉淀，其不仅能降低重复建设、减少烟囱式协作的成本，也是差异化竞争优势所在，增强企业快速创新和，助力企业构筑业务生态。数据中台的核心是赋能，通过企业数据能力的汇集和IT新技术的支撑，有效增强企业运营、延伸和创造业务的能力，以数据流动为连接，以市场化反应为驱动，全域快速数据反馈，让试错成本更低，反应速度更快，助力企业构筑业务生态。数据中台是面向市场化竞争企业的数字化转型推动力，不断演化产生全新的企业创新服务和产品，结合业务中台的协作联动，有效促进企业业务能力和运营效率的两维度成长，构建“搭台唱戏”的支撑新模式，促进业务延展百花齐放，高效助力智慧运营。
技术实现思路
针对现有技术中存在的问题，本专利技术的目的在于提供一种电力营销服务系统数据中台设计方法，可采用OneData、OneID、OneService体系方法论作为数据中台的建设方法论，建成包括基础数据中心、全域数据中心、萃取数据中心、数据服务中心等在内的数据中台服务体系，构建总体遵照“双线推进、迭代演进、运营驱动”的建设思路开展，一是自下而上开展数据接入准备及数据标准化存储，实现营销全域数据的融合沉淀；二是自上而下的数据分析模型构建及数据服务提炼，逐步实现对业务的服务化支撑，提炼营销数据共享服务能力。为达到上述目的，本专利技术采用以下技术方案予以实现。一种电力营销服务系统数据中台设计方法，包括以下步骤：步骤1，数据汇聚：包含数据指标梳理、业务主数据梳理、企业级数据库表建立和规范更新；通过在线的数据采集接入工具，对接各业务和外部数据，完成存量和增量数据同步协同，基于业务驱动逐步将数据时效由T+1提升到准实时，构建电力营销服务系统的数据基础；步骤2，数据融合：通过数据统一体系方法论，在中台规范设计的基础上，将业务不同主题域进行数据组织，形成公共数据层模型，开展代码研发和部署运维；步骤3，数据萃取：以业务需求分析为导向，建立面向业务的多维度体系和面向业务场景应用的数据应用层，完成数据萃取，为上层服务提供数据基础；步骤4，分析结果沉淀：依据业务需求、业务应用查询要求、数据维护需求进行沉淀总结；步骤5，数据服务提炼及全过程数据运营：业务人员设计数据质量检查规则及数据运营机制，数据团队利用梳理完成后数据资产目录及数据质量规则进行信息化实现，定期扫描；随着业务发展和时间推移，检查规则不断迭代。与现有技术相比，本专利技术的有益效果为：本专利技术提供的电力营销服务系统数据中台设计方法建成了包括基础数据中心、全域数据中心、萃取数据中心、数据服务中心等在内的数据中台服务体系，设计过程遵从相应的方法论、标准规范和要求，前后环节之间相互验证迭代。通过数据汇聚、融合、萃取后为数据服务提供数据支撑，通过数据服务和数据运营管理，实现数据价值挖掘，反向赋能业务。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术提供的电力营销服务系统数据中台设计方法的一种实施例的流程示意图；图2为本专利技术提供的数据开发实施流程示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。参考图1，本专利技术提供了一种电力营销服务系统业务中台设计方法，设计过程分为数据汇聚、数据融合、数据萃取、分析结果沉淀、数据服务提炼以及全过程数据运营5个步骤，过程中遵从相应的方法论、标准规范和要求，前后环节之间相互验证迭代。通过数据汇聚、融合、萃取后为数据服务提供数据支撑，通过数据服务和数据运营管理，实现数据价值挖掘，反向赋能业务。具体如下：步骤1，数据汇聚：包含数据指标梳理、业务主数据梳理、企业级数据库表建立和规范更新；通过在线的数据采集接入工具，对接各业务和外部数据，完成存量和增量数据同步协同，基于业务驱动逐步将数据时效由T+1提升到准实时，构建电力营销服务系统的数据基础。步骤2，数据融合：通过数据统一体系方法论，在中台规范设计的基础上，将业务不同主题域进行数据组织，形成公共数据层模型，开展代码研发和部署运维；步骤3，数据萃取：以业务需求分析为导向，建立面向业务的多维度体系和面向业务场景应用的数据应用层，完成数据萃取，为上层服务提供数据基础；步骤4，分析结果沉淀：依据业务需求、业务应用查询要求、数据维护需求进行沉淀总结；步骤5，数据服务提炼及全过程数据运营：业务人员设计数据质量检查规则及数据运营机制，数据团队利用梳理完成后数据资产目录及数据质量规则进行信息化实现，定期扫描；随着业务发展和时间推移，检查规则不断迭代。进一步的，步骤1中，数据汇聚是一个动态的过程，应对不同的数据更新频率，需要兼容批式汇聚、流式汇聚、局部增量汇聚、流式转批式汇聚、流式转局部增量汇聚、流式转拉链表汇聚六种数据输入方式，并根据实际需求选择适合的汇聚方法。其中，批式汇聚是最常用的离线数据汇聚方式。此方式按照一定频率读取源端的全量数据快照，批量写入目标端，即可覆盖写入，也可添加日期分区写入。流式本文档来自技高网...

【技术保护点】
1.一种电力营销服务系统数据中台设计方法，其特征在于，包括以下步骤：/n步骤1，数据汇聚：包含数据指标梳理、业务主数据梳理、企业级数据库表建立和规范更新；通过在线的数据采集接入工具，对接各业务和外部数据，完成存量和增量数据同步协同，基于业务驱动逐步将数据时效由T+1提升到准实时，构建电力营销服务系统的数据基础；/n步骤2，数据融合：通过数据统一体系方法论，在中台规范设计的基础上，将业务不同主题域进行数据组织，形成公共数据层模型，开展代码研发和部署运维；/n步骤3，数据萃取：以业务需求分析为导向，建立面向业务的多维度体系和面向业务场景应用的数据应用层，完成数据萃取，为上层服务提供数据基础；/n步骤4，分析结果沉淀：依据业务需求、业务应用查询要求、数据维护需求进行沉淀总结；/n步骤5，数据服务提炼及全过程数据运营：业务人员设计数据质量检查规则及数据运营机制，数据团队利用梳理完成后数据资产目录及数据质量规则进行信息化实现，定期扫描；随着业务发展和时间推移，检查规则不断迭代。/n

【技术特征摘要】
1.一种电力营销服务系统数据中台设计方法，其特征在于，包括以下步骤：
步骤1，数据汇聚：包含数据指标梳理、业务主数据梳理、企业级数据库表建立和规范更新；通过在线的数据采集接入工具，对接各业务和外部数据，完成存量和增量数据同步协同，基于业务驱动逐步将数据时效由T+1提升到准实时，构建电力营销服务系统的数据基础；
步骤2，数据融合：通过数据统一体系方法论，在中台规范设计的基础上，将业务不同主题域进行数据组织，形成公共数据层模型，开展代码研发和部署运维；
步骤3，数据萃取：以业务需求分析为导向，建立面向业务的多维度体系和面向业务场景应用的数据应用层，完成数据萃取，为上层服务提供数据基础；
步骤4，分析结果沉淀：依据业务需求、业务应用查询要求、数据维护需求进行沉淀总结；
步骤5，数据服务提炼及全过程数据运营：业务人员设计数据质量检查规则及数据运营机制，数据团队利用梳理完成后数据资产目录及数据质量规则进行信息化实现，定期扫描；随着业务发展和时间推移，检查规则不断迭代。


2.根据权利要求1所述的电力营销服务系统数据中台设计方法，其特征在于，步骤1中，所述数据汇聚的方法包含批式汇聚、流式汇聚、局部增量汇聚、流式转批式汇聚、流式转局部增量汇聚、流式转拉链表汇聚。


3.根据权利要求1所述的电力营销服务系统数据中台设计方法，其特征在于，在步骤1的数据汇聚的过程中，数据输入的方式包含兼容批式和流式。


4.根据权利要求1所述的电力营销服务系统数据中台设计方法，其特征在于，步骤2包含以下子步骤：
子步骤2.1，数据调研：对业务系统中的业务进行调研，并进行需求分析；
子步骤2.2，数据域划分：根据数据调研的结果，将业务过程或维度进...

【专利技术属性】
技术研发人员：王锦志，许道强，朱平飞，张才俊，郭翔，
申请(专利权)人：王锦志，
类型：发明
国别省市：北京;11