一种电力业务数据整合系统技术方案

本发明专利技术提供一种电力业务数据整合系统，包括，数据采集模块，用以采集用户的业务数据、每日抄表数据、抄表异常数据及客户服务数据；数据整合模块，用以调用常用分析对象，根据预设的整合规则进行常用分析对象的整合，将各常用分析对象所涉及到的底层库表进行数据的跨域整合，确定常用分析对象的关联关系；数据汇总模块，用以根据预存的预处理策略和各常用分析对象的关联关系进行多维度汇总，生成常用分析对象多维统计模型；客户全维度信息模块，用以根据常用分析对象多维统计模型确定用电客户在核算周期内所有相关信息的关联关系，生成客户全维度信息模型。本发明专利技术打通与电费核算业务相关的所有孤岛，实现基于用电客户的全维度、全方位展示。

【技术实现步骤摘要】
一种电力业务数据整合系统
本专利技术涉及电力
，特别是涉及一种电力业务数据整合系统。
技术介绍
目前，电费核算业务人员在做核算业务时，由于营销系统模型庞大且复杂，业务数据分散在不同的领域或系统功能中，当需要获取一个客户的所有信息时，需要来回反复的查看多个功能页面，甚至不同的业务系统(比如营销系统只有月度电量，而日度电量数据需要从计量自动化系统进行查看)，电力业务数据的整合度低，无法有效的对数据进行整体统计，导致在做电费核查时无法准确的定位异常所在，极大影响了电费核查工作效率。因此有必要采用有效的技术手段，对分散在不同领域或模块的数据进行整合并统一建模形成基于客户全维度的信息模型。
技术实现思路
本专利技术的目的在于，提出一种电力业务数据整合系统，解决现有方法电力业务数据的整合度低，无法有效的对数据进行整体统计，影响了电费核查工作效率的技术问题。为实现上述目的，本专利技术实施例提供一种电力业务数据整合系统，包括：数据采集模块，用以通过数据接口从多个数据源采集用户的业务数据、每日抄表数据、抄表异常数据及客户服务数据；数据整合模块，用以从业务数据、每日抄表数据、抄表异常数据及客户服务数据中调用常用分析对象，根据预设的整合规则进行常用分析对象的整合，将各常用分析对象所涉及到的底层库表进行数据的跨域整合，获得各常用分析对象的大宽表；并根据所述常用分析对象的大宽表确定常用分析对象的关联关系；其中，所述常用分析对象至少包括用电客户、用电容量、售电量、电费电价、客服工单、客服坐席、话务记录、业扩工单、业扩配套项目；数据汇总模块，用以根据预存的预处理策略和各常用分析对象的关联关系进行多维度汇总，输出基础统计指标和业务主题；并根据基础统计指标和业务主题生成常用分析对象多维统计模型；客户全维度信息模块，用以根据常用分析对象多维统计模型确定用电客户在核算周期内所有相关信息的关联关系，生成客户全维度信息模型。优选地，该系统还包括，缓存模块，用以存储从多个数据源采集用户的业务数据、每日抄表数据、抄表异常数据及客户服务数据；存储数据汇总模块输出的常用分析对象多维统计模型；以及存储客户全维度信息模块生成的客户全维度信息模型。优选地，所述用户的业务数据至少包括：用户档案、业扩工作单基本信息、换表信息、抄表信息、计量点信息、计量点关系、变压器信息、核算变压器变更信息、核算变压器补收容量信息、存取电量记录、存取电量明细、计量点变压器关系、计量点电量、量价费明细、复核工单信息。优选地，所述数据采集模块还用于解析所述业务数据、所述每日抄表数据、所述抄表异常数据及所述客户服务数据，并按照预设的存储规则进行存储。优选地，所述数据汇总模块还包括：数据清洗模块，用以根据预设的目标数据转换规则对来自不同数据源的各常用分析对象进行相同实体数据记录的识别，并对存在同一实体数据但来自不同数据源的常用分析对象进行一致性检测；编码转换模块，用以根据数据维度和预设的编码值定义标准，对常用分析对象中涉及编码定义和编码取值的相关数据表和字段值进行检测；根据检测结果确定常用分析对象记录与编码的关联关系；多表合并模块，用以将多个业务表根据关联字段进行关联，通过多个业务表的合并实现行列的任意互换；并对关联字段进行拆分，生成宽表的拉伸关系信息。优选地，所述数据清洗模块还用于根据一致性检测结果生成不同数据源中同一常用分析对象之间的差异信息，生成数据质量信息；按照预设的转换规则，根据数据质量信息对常用分析对象进行类型转换或值转换，形成可以进行拼接和自动映射的中间数据。优选地，所述编码转换模块还用于检测标准编码数据值是否在预设的合理取值范围内，当检测到未在预设的合理取值范围内，判定出现非法编码值，生成数据问题清单及相应的对应方案；并识别动态编码中的新增取值，当识别到新增动态编码值，更新相应的编码定义。优选地，所述客户全维度信息模块还包括：CUB立方体模块，用以根据预设的核心数据立方体和核心数据模型，生成核心数据立方数据并调度相关计算资源执行立方计算、汇总统计；将立方数据存储在临时立方表中，并将新的立方数据与现有立方数据进行比较，根据差异结果生成立方体更新；数据加载模块，用以将经过编码转换模块、数据清洗模型及CUB立方体模块输出的数据，加载到临时目标数据表中，对比临时目标数据表与现有目标数据表中数据的差异，生成对现有数据表的更新信息；并行调度模块：用以通过预设的调度规则根据任务执行时长对编码转换模块、数据清洗模型、CUB立方体模及数据加载模块进行并行调度。优选地，所述客户全维度信息模块还用于将用电用户的需要的业务或业务应用场景输入客户全维度信息模型，输出用电客户的每笔账单建立从电量采集到电费回收过程中的所有相关信息。综上，实施本专利技术的实施例，具有如下的有益效果：所述电力业务数据整合系统针对每个用电客户的每笔账单建立从电量采集到电费回收的全数据链路，为抄核收业务人员提供清晰的电费账单全生命周期视图，同时为处理电量电费类客户投诉提供完整的信息支撑；以用电客户为中心，围绕客户档案信息、月度电量电费信息、业扩业务信息、客服诉求信息、电费复核信息、抄表信息、实时用电负荷等信息，打通与电费核算业务相关的所有孤岛，实现基于用电客户的全维度、全方位展示。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，根据这些附图获得其他的附图仍属于本专利技术的范畴。图1为本专利技术实施例中一种电力业务数据整合系统的结构示意图。图2为本专利技术实施例中一客户全维度信息模型的示意图。具体实施方式为使本专利技术的目的、技术方案和优点更加清楚，下面将结合附图对本专利技术作进一步地详细描述。如图1所示，为本专利技术提供的一种电力业务数据整合系统的一个实施例的示意图。在该实施例中，包括：数据采集模块，用以通过数据接口从多个数据源采集用户的业务数据、每日抄表数据、抄表异常数据及客户服务数据；可以理解的是，利用flume(日志收集系统)实时采集，并通过Kfaka进行传输实现对文本文件的采集及解析入库。把数据从数据源收集过来，再将收集到的数据送到指定的目的地。为了保证输送的过程一定成功，在送到目的地之前，先缓存数据，待数据真正到达目的地后，再删除缓存的数据。具体实施例中，将营销管理系统、客户全方位系统、计量自动化系统等各业务系统(或其他相关系统，或数据库)的数据通过批量同步、增量更新等方式抽取，并给所有数据加上时间戳。例如，可从营销管理系统中获取数据如下业务数据；具体包括：用户档案、业扩工作单基本信息、换表信息、抄表信息、计量点信息、计量点关系、变压器信息、核算变压器变更信息、核算变压器补收容量信息、存取电量记录、存取电量明细、计量点变压器关系、计量本文档来自技高网...

【技术保护点】
1.一种电力业务数据整合系统，其特征在于，包括：/n数据采集模块，用以通过数据接口从多个数据源采集用户的业务数据、每日抄表数据、抄表异常数据及客户服务数据；/n数据整合模块，用以从业务数据、每日抄表数据、抄表异常数据及客户服务数据中调用常用分析对象，根据预设的整合规则进行常用分析对象的整合，将各常用分析对象所涉及到的底层库表进行数据的跨域整合，获得各常用分析对象的大宽表；并根据所述常用分析对象的大宽表确定常用分析对象的关联关系；其中，所述常用分析对象至少包括用电客户、用电容量、售电量、电费电价、客服工单、客服坐席、话务记录、业扩工单、业扩配套项目；/n数据汇总模块，用以根据预存的预处理策略和各常用分析对象的关联关系进行多维度汇总，输出基础统计指标和业务主题；并根据基础统计指标和业务主题生成常用分析对象多维统计模型；/n客户全维度信息模块，用以根据常用分析对象多维统计模型确定用电客户在核算周期内所有相关信息的关联关系，生成客户全维度信息模型。/n

【技术特征摘要】
1.一种电力业务数据整合系统，其特征在于，包括：
数据采集模块，用以通过数据接口从多个数据源采集用户的业务数据、每日抄表数据、抄表异常数据及客户服务数据；
数据整合模块，用以从业务数据、每日抄表数据、抄表异常数据及客户服务数据中调用常用分析对象，根据预设的整合规则进行常用分析对象的整合，将各常用分析对象所涉及到的底层库表进行数据的跨域整合，获得各常用分析对象的大宽表；并根据所述常用分析对象的大宽表确定常用分析对象的关联关系；其中，所述常用分析对象至少包括用电客户、用电容量、售电量、电费电价、客服工单、客服坐席、话务记录、业扩工单、业扩配套项目；
数据汇总模块，用以根据预存的预处理策略和各常用分析对象的关联关系进行多维度汇总，输出基础统计指标和业务主题；并根据基础统计指标和业务主题生成常用分析对象多维统计模型；
客户全维度信息模块，用以根据常用分析对象多维统计模型确定用电客户在核算周期内所有相关信息的关联关系，生成客户全维度信息模型。


2.如权利要求1所述的系统，其特征在于，该系统还包括，缓存模块，用以存储从多个数据源采集用户的业务数据、每日抄表数据、抄表异常数据及客户服务数据；存储数据汇总模块输出的常用分析对象多维统计模型；以及存储客户全维度信息模块生成的客户全维度信息模型。


3.如权利要求2所述的系统，其特征在于，所述用户的业务数据至少包括：用户档案、业扩工作单基本信息、换表信息、抄表信息、计量点信息、计量点关系、变压器信息、核算变压器变更信息、核算变压器补收容量信息、存取电量记录、存取电量明细、计量点变压器关系、计量点电量、量价费明细、复核工单信息。


4.如权利要求3所述的系统，其特征在于，所述数据采集模块还用于解析所述业务数据、所述每日抄表数据、所述抄表异常数据及所述客户服务数据，并按照预设的存储规则进行存储。


5.如权利要求4所述的系统，其特征在于，所述数据汇总模块还包括：
数据清洗模块，用以根据预设的目标数据转换规则对来自不同数据源的各常用分析对象进行相同实体数据记录的识别，并...

【专利技术属性】
技术研发人员：黄公跃，付婷婷，林思远，薛冰，黄媚，刘家学，李艳，孙梦龙，董佩纯，王海涛，林冰虹，黎怡均，陈辉，陈敏，庄婉铃，黄安子，陈华锋，陈琳，林磊，
申请(专利权)人：深圳供电局有限公司，
类型：发明
国别省市：广东;44