数据查询方法、装置、系统、计算机设备及存储介质制造方法及图纸

技术编号:23149064 阅读:43 留言:0更新日期:2020-01-18 13:28
本发明专利技术涉及数据查询方法、装置、系统、计算机设备及存储介质,属于互联网技术领域。该方法包括:接收业务端发送的数据查询请求;数据查询请求通过预先设定的接口接收;根据数据查询请求,从数据库的候选数据中查询对应应用端的目标数据;候选数据由应用端的事件数据批量整合得到;将所查询的目标数据返回给业务端。上述技术方案,解决了业务端和应用端有较大的负荷,影响业务端和应用端的正常运行,使得数据的查询效率低下的问题。不需要业务端和应用端一一交互,能有效减少业务端和应用端的负载,提高业务端查询应用端数据的效率。

Data query methods, devices, systems, computer equipment and storage media

【技术实现步骤摘要】
数据查询方法、装置、系统、计算机设备及存储介质
本专利技术涉及互联网
,特别是涉及数据查询方法、装置、系统、计算机设备及存储介质。
技术介绍
随着互联网系统的高速发展,业务端往往需要向应用端查询大量的数据,以便进行业务处理。而根据业务需要,应用端的种类和数量往往较多。在传统的解决方案中,业务端需要去调度各个应用端以查询原始数据或者加工后的数据。在实现本专利技术过程中,专利技术人发现传统方式中至少存在如下问题:业务端需要与各个应用端分别进行交互才能查询到对应的数据,而各个应用端可能需要针对业务端的需求做额外的数据存储和数据加工,且大量的历史数据会在应用端中积压。这种情况下,业务端和应用端都会有较大的负荷,这些负荷会影响业务端和应用端的正常运行,使得数据的查询效率低下。
技术实现思路
基于此,本专利技术实施例提供了数据查询方法、装置、系统、计算机设备及存储介质,在数据查询过程中能有效降低业务端和应用端的负载,提高数据查询的效率。本专利技术实施例的内容如下:第一方面,本专利技术实施例提供一种数据查询方本文档来自技高网...

【技术保护点】
1.一种数据查询方法,其特征在于,包括以下步骤:/n接收业务端发送的数据查询请求;所述数据查询请求通过预先设定的接口接收;所述预先设定的接口与应用端对应;/n根据所述数据查询请求,从数据库的候选数据中查询对应应用端的目标数据;所述候选数据由所述应用端的事件数据批量整合得到;/n将所查询的目标数据返回给所述业务端。/n

【技术特征摘要】
1.一种数据查询方法,其特征在于,包括以下步骤:
接收业务端发送的数据查询请求;所述数据查询请求通过预先设定的接口接收;所述预先设定的接口与应用端对应;
根据所述数据查询请求,从数据库的候选数据中查询对应应用端的目标数据;所述候选数据由所述应用端的事件数据批量整合得到;
将所查询的目标数据返回给所述业务端。


2.根据权利要求1所述的方法,其特征在于,所述数据库包括hbase数据库;
所述根据所述数据查询请求,从数据库的候选数据中查询对应应用端的目标数据的步骤之前,还包括:
接收客户端发送的hfile文件;所述hfile文件由客户端中的hive工具对应用端的事件数据批量整合得到,并由所述客户端的bulkload工具跑批上传;
将所述hfile文件作为候选数据存入所述hbase数据库中。


3.根据权利要求2所述的方法,其特征在于,所述客户端包括第一子客户端和第二子客户端;
所述根据所述数据查询请求,从数据库的候选数据中查询对应应用端的目标数据的步骤之前,还包括:
接收第一子客户端发送的离线数据;所述离线数据中所包含的数据内容根据第一配置页面中输入的配置信息确定;
接收第二子客户端发送的实时数据;所述实时数据中所包含的数据内容根据第二配置页面中输入的配置信息确定;
根据所述离线数据和/或所述实时数据得到所述候选数据;
将所得到的候选数据存入所述数据库中。


4.根据权利要求3所述的方法,其特征在于,所述第一子客户端包括CRM系统;
所述接收第一子客户端发送的离线数据的步骤,包括:
接收所述CRM系统发送的离线数据。


5.根据权利要求1所述的方法,其特征在于,所述接收业务端发送的数据查询请求的步骤,包括:
接收业务端通过预先设定的dubbo接口发送的数据查询请求;其中,所述dubbo接口根据各个应用端的标签字段设定;所述标签字段根...

【专利技术属性】
技术研发人员:潘豪卢志健林华春邓文强欧阳元明
申请(专利权)人:招联消费金融有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1