一种数据分析方法及装置制造方法及图纸

技术编号:32644905 阅读:24 留言:0更新日期:2022-03-12 18:24
本申请涉及大数据技术领域,尤其涉及一种数据分析方法及装置。用于解决已有技术下通过客户端查询到的查询结果存在着时效性差的问题,该方法为:在接收到客户端发送的查询请求后,从客户端关联的数据仓库中获取客户端关联的宽表数据,其中,查询请求包括客户端的用户标识和待查询信息,宽表数据是对目标数据集合进行数据分析得到的,目标数据集合是将增量源数据集合和历史源数据集合进行汇总得到的,增量源数据集合是在确定满足触发条件时获取到的;再基于客户端的用户标识,从宽表数据中获取与待查询信息相匹配的客户端持有的产品的产品描述信息,从而基于获取到的产品描述信息生成客户端的查询结果;这样,提升了查询结果的时效性。的时效性。的时效性。

【技术实现步骤摘要】
一种数据分析方法及装置


[0001]本申请涉及大数据
,尤其涉及一种数据分析方法及装置。

技术介绍

[0002]数据仓库的目的是构建面向分析的集成化数据环境,为企业或个人提供决策支持。由于传统数据仓库的数据更新周期通常是一天、一周,甚至是以一个月,因此,已有技术下,对上述数据仓库的数据进行数据分析,也跟随着数据更新周期进行的,这样,就导致得到的数据分析结果也是周期性的,存在着时效性差的问题。
[0003]通常企业或个人通过客户端的查询功能对自身持有的产品的资源进行查询,由于上述对数据仓库中的数据进行数据分析是周期性,导致得到的数据分析结果也是周期性的,这样,就造成企业或个人通过客户端查询到的查询结果不能准确地反映当前持有的产品的资源情况,因此,造成企业或个人通过客户端查询到的查询结果也存在着时效性差的问题。
[0004]综上,需要设计一种新的方法,以解决上述问题。

技术实现思路

[0005]本申请实施例提供一种数据分析方法及装置,用以解决已有技术下通过客户端查询到的查询结果存在着时效性差的问题。
[本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据分析方法,其特征在于,包括:在接收到客户端发送的查询请求后,从所述客户端关联的大数据仓库中获取所述客户端关联的宽表数据,其中,所述查询请求包括所述客户端的用户标识和待查询信息,所述宽表数据是对目标数据集合进行数据分析得到的,所述目标数据集合是将增量源数据集合和历史源数据集合进行汇总处理得到的,所述增量源数据集合是在确定满足触发条件时获取到的,所述宽表数据包括每个客户端的用户标识,以及每个客户端持有的每个产品的产品描述信息;基于所述客户端的用户标识,从所述宽表数据中获取与所述待查询信息相匹配的所述客户端持有的产品的产品描述信息,并基于获取到的所述产品描述信息,生成所述客户端的查询结果。2.如权利要求1所述的方法,其特征在于,所述宽表数据是通过执行如下操作得到的:在所述结算周期内,若确定满足所述触发条件,则从交易系统的数据库中,获取所述增量源数据集合,并将获取到的所述增量源数据集合存储至大数据仓库中,其中,所述增量源数据集合包括至少一个客户端的用户标识和所述至少一个客户端的增量交易数据;将所述大数据仓库中的所述增量源数据集合和所述历史源数据集合进行汇总处理,得到目标数据集合,其中,所述历史源数据集合包括在本次获取所述增量源数据集合之前,与至少一个客户端关联的历史交易数据;通过预先构建的宽表对所述目标数据集合进行数据分析,得到所述宽表数据。3.如权利要求2所述的方法,其特征在于,所述触发条件包括如下条件中的部分或全部:当前时刻为预设时刻集合中的任意一个预设时刻,其中,所述预设时刻集合包含至少一个预设时刻,所述预设时刻是基于交易数据关联的产品设置的;交易数据已存储至所述交易系统的数据库中,其中,所述交易数据是基于用户在关联的客户端上执行的点击操作得到的。4.如权利要求2所述的方法,其特征在于,在当前结算周期结束之前,在确定得到当前结算周期的最终的所述宽表数据之后,还包括:获取每个客户端存储在所述大数据仓库中的当前结算周期的目标数据集合;分别对所述当前结算周期的目标数据集合进行数据分析,得到每个客户端持有的每个产品的第一资源;基于最终的所述宽表数据,获取每个客户端持有的每个产品的产品描述信息,并分别基于获取到的产品描述信息,得到每个客户端持有的每个产品的第二资源;分别将第一资源与对应的第二资源进行比对;在确定比对结果无误后,将最终的所述宽表数据存储在所述大数据仓库中。5.如权利要求2所述的方法,其特征在于,所述将所述大数据仓库中的所述增量源数据集合和历史源数据集合进行汇总处理,得到目标数据集合,包括:基于所述增量源数据集合包含的增量交易数据,对所述历史源数据集合包含的历史交易数据进行更新;将更新后的所述历史源数据集合作为所述目标数据集合。6.如权利要求1

5任一项所述的方法,其特征在于,每个产品描述信息包括产品标识和
对应的至少一条产品资源信息,每条产品资源信息包括所述客户端关联的消耗资源、增加资源,以及各自对应的产品数量;所述基于获取到的所述产品描述信息,生成所述客户端的查询结果,包括:分别基于每个产品的消耗资源、增加资源,以及各自对应的产品数量,按照每个结算周期,确定所述客户端持有的每个产品的资源,并基于确定的每个产品的资源,生成所述客户端的查询结果。7.一种数据分析装置,其特征在于,包括:获取模块,用于在接收到客户端发送的查询请求后,从所述客户端关联的大数据仓库中获取所述客户端关联的宽表数据,其中,所述查询请求包括所述客户端的用户标识和待查询信息,所述宽表数据是对目标数据集合进行数据分析得到的,所述目标数据集合是将增量源数据集合和历史源数据集合进行汇总处理得到的,所述增量源数据集合是...

【专利技术属性】
技术研发人员:戢涛游屹李斌
申请(专利权)人:中国建设银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1