一种数据处理方法技术

本发明专利技术公开了一种数据处理方法

【技术实现步骤摘要】
一种数据处理方法、装置、设备、介质及产品


[0001]本专利技术实施例涉及大数据
，尤其涉及一种数据处理方法
、
装置
、
设备
、
介质及产品
。

技术介绍

[0002]银行决策层需要实时知道本行业绩，以对市场作出反应，以及，实时获取员工业绩，以对员工进行奖惩
。
[0003]然而，目前业绩计量系统的业绩数据均基于源系统夜间批量传输到数据仓库的数据加工，时效性在
T+1
，无当日实时数据，无法实时统计并展示业绩，需要一线员工在日终手动统计数据，具有业绩统计流程效率较低的问题
。

技术实现思路

[0004]本专利技术实施例提供一种数据处理方法
、
装置
、
设备
、
系统及存储介质，可以满足银行的实时业绩统计需求，提高业绩统计流程效率
。
[0005]第一方面，本专利技术实施例提供了一种数据处理方法，包括：
[0006]获取业务系统中的实时流数据；
[0007]获取与所述业务系统中各业务关联的维度表，根据所述维度表和实时流数据生成结果表；
[0008]将所述结果表中的明细数据存入应用数据服务层，通过所述应用数据服务层响应于实时查询操作，提供所述明细数据；
[0009]将所述结果表中的明细数据存入第一消息队列，采用所述第一消息队列中的所述明细数据基于目标维度进行实时汇总，得到所述目标维度对应的业绩数据
>。
[0010]第二方面，本专利技术实施例还提供了一种数据处理装置，该装置包括：
[0011]数据获取模块，用于获取业务系统中的实时流数据；
[0012]结果表生成模块，用于获取与所述业务系统中各业务关联的维度表，根据所述维度表和实时流数据生成结果表；
[0013]明细查询模块，用于将所述结果表中的明细数据存入应用数据服务层，通过所述应用数据服务层响应于实时查询操作，提供所述明细数据；
[0014]业绩汇总模块，用于将所述结果表中的明细数据存入第一消息队列，采用所述第一消息队列中的所述明细数据基于目标维度进行实时汇总，得到所述目标维度对应的业绩数据
。
[0015]第三方面，本专利技术实施例还提供了一种电子设备，包括存储器
、
处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如本专利技术实施例中任一所述的数据处理方法
。
[0016]第四方面，本专利技术实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本专利技术实施例中任一所述的数据处理方法
。
[0017]第五方面，本专利技术实施例还提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现如本专利技术实施例中任一所述的数据处理方法
。
[0018]本专利技术实施例的技术方案，通过获取实时的银行业务系统当中的实时流数据，并结合维度表生成结果表
。
通过将结果表中的明细数据分别输出至应用数据服务层以用于员工的实时业务查询，通过将结果表中的明细数据存入第一消息队列以用于明细数据的实时汇总加工
。
能够满足员工层面的实时业务查询需求，以及机构层面的实时业务汇总需求
。
解决了现有技术当中采用
T+1
数据确定业绩导致时效性无法得到满足，需要手动统计数据的问题
。
附图说明
[0019]为了更清楚地说明本专利技术实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本专利技术的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图
。
[0020]图1为本专利技术实施例提供的一种数据处理方法的流程图；
[0021]图2为本专利技术实施例提供的另一种数据处理方法的流程图；
[0022]图3为本专利技术实施例提供的另一种数据处理方法的流程图；
[0023]图4为本专利技术实施例提供的另一种数据处理方法的流程图；
[0024]图5为本专利技术实施例提供的一种数据处理装置的结构框图；
[0025]图6为本专利技术实施例提供的一种电子设备的结构框图
。
具体实施方式
[0026]下面结合附图和实施例对本专利技术作进一步的详细说明
。
可以理解的是，此处所描述的具体实施例仅仅用于解释本专利技术，而非对本专利技术的限定
。
另外还需要说明的是，为了便于描述，附图中仅示出了与本专利技术相关的部分而非全部结构
。
[0027]应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释
。
同时，在本专利技术的描述中，术语“第一”、“第二”等仅用于区分描述，而不能理解为指示或暗示相对重要性
。
本申请技术方案中对数据的获取
、
存储
、
使用
、
处理等均符合国家法律法规的相关规定
。
[0028]图1为本专利技术实施例提供的一种数据处理方法的流程图，该方法可适用于银行网点进行营销业绩展示时，分行普遍反映网点需要在日终统计当天机构和员工的业务办理情况的情况
。
该方法可以由数据处理装置来执行，该装置可以由硬件和
/
或软件实现，并通常设置于电子设备中
。
如图1所示，该方法包括：
[0029]S110、
获取业务系统中的实时流数据
。
[0030]其中，实时流数据可以为银行工作人员在为客户办理相关的银行业务时，实时
、
持续生成的业务数据，如当前工作人员所办理业务的业务日志
、
系统日志等各类日志信息
。
[0031]其中，业务系统可以为银行工作人员在办理银行相关业务时，所用到的对应的系统
。
例如，用于给客户办理存取款业务的存取款业务系统；用于给用户办理基金业务的基金业务系统；用于给客户办理保险业务的保险业务系统等银行相关的业务系统
。
[0032]具体的，获取业务系统中的实时流数据，包括：
[0033]通过各业务系统对应的第二消息队列接收对应系统中的实时流数据
。
[0034]其中，各业务系统对应的第二消息队列可以是各个业务系统各自对应的消息队列，该消息队列用于接收银行业务员通过各业务系统给客户办理相关业务时，所产生的实时流数据
。
例如，在银行业务员通过存取款业务系统为客户办理存款业务时，可以通过存取款业务系统所对应的第二消息队列，接收业务员在为客户办理存款业务过程中所产生的实时流数据
。
本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种数据处理方法，其特征在于，包括：获取业务系统中的实时流数据；获取与所述业务系统中各业务关联的维度表，根据所述维度表和实时流数据生成结果表；将所述结果表中的明细数据存入应用数据服务层，通过所述应用数据服务层响应于实时查询操作，提供所述明细数据；将所述结果表中的明细数据存入第一消息队列，采用所述第一消息队列中的所述明细数据基于目标维度进行实时汇总，得到所述目标维度对应的业绩数据
。2.
根据权利要求1所述的方法，其特征在于，所述获取业务系统中的实时流数据，包括：通过各业务系统对应的第二消息队列接收对应系统中的实时流数据
。3.
根据权利要求2所述的方法，其特征在于，所述通过各业务系统对应的第二消息队列接收对应系统中的实时流数据，包括：对于每个业务系统，在通过该业务系统办理业务的情况下，通过第二消息队列实时接收业务办理过程中产生的日志信息
。4.
根据权利要求1所述的方法，其特征在于，在获取与所述业务系统中各业务关联的维度表之前，还包括：对所述实时流数据进行清洗，对清洗后的实时流数据进行存储结构转换，得到主表
。5.
根据权利要求4所述的方法，其特征在于，所述获取与所述业务系统中各业务关联的维度表，根据所述维度表和实时流数据生成结果表，包括：从数据仓库贴源区获取与各业务系统中各业务关联的至少一个维度表；根据所述至少一个维度表中与所述主表相同的字段，关联所述维度表和主表生成结果表
。6.
根据权利要求1所述的方法，其特征在于，所述将所述结果表中的明细数据存入应用数据服务层，通过所述应用数据服务层响应于实时查询操作，提供所述明细数据，包括：将所述结果表中的明细数据发送至分布式全文检索引擎中的应用数据服务层；通过所述应用数据服务层提供实时查询操作所需的所述明细数据
。7.
根据权利要求1所述的方法，其特征在于，所述将所述结果表中的明细数据存入第一消息队列，采用所述第一消息队列中的所述明细数据基于目标维度进行实时汇总，得到所述目标维度对应的业绩数据，包括：将所述结果表中的明细数据发送至分布式发布订阅消息系统中的第一消息队列；获取所述第一消息队列中的所述明细数据，基于所述明细数据中的员工标识关联所述明细数据与员工信息表；采用所述明细数据基于员工维度进行实时汇总，得到员工的业绩数据
。8.
根据权利要求1所述的方法，其特征在于，所述将所述结果表中的明细数据存入第一消息队列，采用所述第一消息队列中的所述明细数据基于目标维度进行实时汇总，得到所述目标维度对应的业绩数据，包括：将所述结果表中的明细数据发送至分布式发布订阅消息系统中的第一消息队列；获取所述第一消息队列中的所述明细数据，基于所述明细数据中的机构标识关联所述明细数据与机构层级表；
采用所述明细数据基于机构维度进行实时汇总，得到机构的业绩数据
。9.<...

【专利技术属性】
技术研发人员：廖紫菱，
申请(专利权)人：建信金融科技有限责任公司，
类型：发明
国别省市：