【技术实现步骤摘要】
银行业务数据处理、查询方法及装置
本专利技术涉及数据处理技术，具体的讲是一种银行业务数据处理、查询方法及装置。
技术介绍
根据金融行业需求，需要提供相关交易的各种维度的查询，以支持业务部门营销活动和考核的开展。现有技术的报表系统多采用关系型数据库如oracle，如果数据规模达到TB级以上，加工效率和查询效率就会严重降低，对于传统关系型数据库，只能采用部分存储或者分库分表的方式来解决容量限制问题。
技术实现思路
为满足银行对历史数据分析，分维度快速展示的需求，实现海量数据处理及查询，本专利技术实施例提供了一种银行业务数据处理方法，该处理方法包括：将存储至大数据节点服务器的银行业务源数据加载到HIVE数据库；按预设的业务数据维度对HIVE数据库中的银行业务源数据进行预处理；将预处理后的银行业务源数据存储至HBASE数据库。本专利技术实施例中，将存储至大数据节点服务器的银行业务源数据加载到HIVE数据库包括：根据业务数据的交易明细将存储至大数据节点服务器的银行业务源数据加载到HI...
【技术保护点】
1.一种银行业务数据处理方法，其特征在于，所述的方法包括：/n将存储至大数据节点服务器的银行业务源数据加载到HIVE数据库；/n按预设的业务数据维度对HIVE数据库中的银行业务源数据进行预处理；/n将预处理后的银行业务源数据存储至HBASE数据库。/n
【技术特征摘要】
1.一种银行业务数据处理方法，其特征在于，所述的方法包括：
将存储至大数据节点服务器的银行业务源数据加载到HIVE数据库；
按预设的业务数据维度对HIVE数据库中的银行业务源数据进行预处理；
将预处理后的银行业务源数据存储至HBASE数据库。
2.如权利要求1所述的银行业务数据处理方法，其特征在于，所述的将存储至大数据节点服务器的银行业务源数据加载到HIVE数据库包括：
根据业务数据的交易明细将存储至大数据节点服务器的银行业务源数据加载到HIVE数据库；其中，所述的业务数据的交易明细包括：产品交易流水、产品基本信息、交易机构信息、客户持仓信息、产品类型信息及交易渠道信息。
3.如权利要求1所述的银行业务数据处理方法，其特征在于，所述的按预设的业务数据维度对HIVE数据库中的银行业务源数据进行预处理包括：
按预设的业务数据维度利用KYLIN对HIVE数据库中的银行业务源数据进行预处理；其中，所述的业务数据维度包括：交易日期、交易机构、交易渠道及产品类型。
4.一种银行业务数据查询方法，其特征在于，所述的方法包括：
将存储至大数据节点服务器的银行业务源数据加载到HIVE数据库；
按预设的业务数据维度对HIVE数据库中的银行业务源数据进行预处理；
将预处理后的银行业务源数据存储至HBASE数据库；
利用多维数据引擎查询存储至HBASE数据库的银行业务源数据。
5.如权利要求4所述的银行业务数据查询方法，其特征在于，所述的将存储至大数据节点服务器的银行业务源数据加载到HIVE数据库包括：
根据业务数据的交易明细将存储至大数据节点服务器的银行业务源数据加载到HIVE数据库；其中，所述的业务数据的交易明细包括：产品交易流水、产品基本信息、交易机构信息、客户持仓信息、产品类型信息及交易渠道信息。
6.如权利要求4所述的银行业务数据查询方法，其特征在于，所述的按预设的业务数据维度对HIVE数据库中的银行业务源数据进行预处理包括：
按预设的业务数据维度利用KYLIN对HIVE数据库中的银行业务源数据进行预处理；其中，所述的业务数据维度包括：交易日期、交易机构、交易渠道及产品类型。
7.一种银行业务数据处理装置，其特征在于，所述的装置包括：
HIVE加载模块，用于将存储至大数据节点服务器的银行业务源数据加载到HIVE数据库；
预处理模块，用于按预设的业务数据维度对HIVE数据库中的银行业务源数据进行预处理；
存储模块，用于将预处理后的银行业务源数据存储至HBASE数据库。
8.如权利要求7所述的银行业务数据处理装置，其特征在于，所述的HIVE...
【专利技术属性】
技术研发人员：张世宜，李杨，
申请(专利权)人：中国建设银行股份有限公司，建信金融科技有限责任公司，
类型：发明
国别省市：北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。