一种数据获方法、装置、设备及可读存储介质制造方法及图纸

本发明专利技术提供了一种数据获方法、装置、设备及可读存储介质，所述方法包括：获取第一信息，所述第一信息包括客户端发送的需求信息；响应于所述第一信息，根据所述需求信息构建对应的配置信息和HTTP接口；获取第二信息，所述第二信息包括所述客户端从所述HTTP接口发起的HTTP请求信息；响应于所述第二信息，将所述HTTP请求信息与对应的配置信息进行分析，得到第一分析结果，根据所述第一分析结果在数据库中获取数据并返回给所述客户端。本发明专利技术既降低了客户端数据获取的成本，又降低了接口提供方开发的成本，实现了高效的数据获取能力。实现了高效的数据获取能力。实现了高效的数据获取能力。

【技术实现步骤摘要】
一种数据获方法、装置、设备及可读存储介质


[0001]本专利技术涉及数据获取
，具体而言，涉及一种数据获方法、装置、设备及可读存储介质。

技术介绍

[0002]目前数据获取主要分为两种方式，一种是由客户端直接连接数据库进行数据获取，这种方式的弊端在于，首先客户端需要清晰的了解表结构和数据获取逻辑，并且对于不同的数据源，都需要客户端编写数据库连接代码。而且通常客户端开发人员和数仓开发人员是不同部门的两个人，若数仓开发人员调整了数仓结构，很难知道库表被哪些客户端再使用，将导致维护难。另一种是由客户端请求接口的方式，由接口提供方统一为所有数据源写好连接代码，为客户端屏蔽了数据获取逻辑，降低客户端获取数据的成本。但此方式的缺陷在于，每产生一次数据获取的需求，就需要为此需求开发一个接口，需要一定的开发成本。

技术实现思路

[0003]本专利技术的目的在于提供一种数据获方法、装置、设备及可读存储介质，以改善上述问题。
[0004]为了实现上述目的，本申请实施例提供了如下技术方案：
[0005]一方面，本申请实施例提供了一种数据获取方法，所述方法包括：
[0006]获取第一信息，所述第一信息包括客户端发送的需求信息；
[0007]响应于所述第一信息，根据所述需求信息构建对应的配置信息和HTTP接口；
[0008]获取第二信息，所述第二信息包括所述客户端从所述HTTP接口发起的HTTP请求信息；
[0009]响应于所述第二信息，将所述HTTP请求信息与对应的配置信息进行分析，得到第一分析结果，根据所述第一分析结果在数据库中获取数据并返回给所述客户端。
[0010]第二方面，本申请实施例提供了一种数据获取装置，所述装置包括第一获取模块、第一响应模块、第二获取模块和第二响应模块。
[0011]第一获取模块，用于获取第一信息，所述第一信息包括客户端发送的需求信息；
[0012]第一响应模块，用于响应于所述第一信息，根据所述需求信息构建对应的配置信息和HTTP接口；
[0013]第二获取模块，用于获取第二信息，所述第二信息包括所述客户端从所述HTTP接口发起的HTTP请求信息；
[0014]第二响应模块，用于响应于所述第二信息，将所述HTTP请求信息与对应的配置信息进行分析，得到第一分析结果，根据所述第一分析结果在数据库中获取数据并返回给所述客户端。
[0015]第三方面，本申请实施例提供了一种数据获取设备，所述设备包括存储器和处理
器。存储器用于存储计算机程序；处理器用于执行所述计算机程序时实现上述数据获取方法的步骤。
[0016]第四方面，本申请实施例提供了一种可读存储介质，所述可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述数据获取方法的步骤。
[0017]本专利技术的有益效果为：
[0018]1、本专利技术通过无代码化，仅通过简单配置就能为客户端提供数据获取接口，为客户端屏蔽数据获取逻辑；通过此种方法可以降低客户端数据获取成本，同时还可以降低接口提供方的开发成本。
[0019]2、本专利技术既降低了客户端数据获取的成本，又降低了接口提供方开发的成本，实现了高效的数据获取能力。
[0020]本专利技术的其他特征和优点将在随后的说明书阐述，并且，部分地从说明书中变得显而易见，或者通过实施本专利技术实施例了解。本专利技术的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
附图说明
[0021]为了更清楚地说明本专利技术实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本专利技术的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
[0022]图1是本专利技术实施例中所述的数据获取方法流程示意图；
[0023]图2是本专利技术实施例中所述的数据获取装置结构示意图；
[0024]图3是本专利技术实施例中所述的数据获取设备结构示意图。
具体实施方式
[0025]为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本专利技术实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本专利技术的实施例的详细描述并非旨在限制要求保护的本专利技术的范围，而是仅仅表示本专利技术的选定实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0026]应注意到：相似的标号或字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。同时，在本专利技术的描述中，术语“第一”、“第二”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
[0027]实施例1
[0028]如图1所示，本实施例提供了一种数据获取方法，该方法包括步骤S1、步骤S2、步骤S3和步骤S4。
[0029]步骤S1、获取第一信息，所述第一信息包括客户端发送的需求信息；
[0030]在本步骤中，客户端发送的需求信息主要为客户端的数据获取需求信息；
[0031]步骤S2、响应于所述第一信息，根据所述需求信息构建对应的配置信息和HTTP接口；
[0032]本步骤中，构建的具体步骤包括步骤S21、步骤S22和步骤S23；
[0033]步骤S21、响应于所述第一信息，根据所述需求信息构建对应的配置信息，每个所述需求信息对应一个所述配置信息，所述配置信息包括第一获取唯一标识、数据获取逻辑、必填项和可访问的客户端，所述数据获取逻辑包括获取数据的数据源和数据查询语句；
[0034]在本步骤中，获取数据的数据源和数据查询语句可以理解为：
[0035]根据业务场景确定合适的数据源：比如业务场景是根据用户UUID获取用户其他信息，并且QPS比较高，那么就可以考虑将数据存入HBase进行查询，如果业务场景是需要明细数据的统计，比如消费记录统计，那么就可以考虑数据存入CK做统计。总的来说就是根据业务场景的特性，和每个数据源自身数据存储的特性，选择能够更好支持业务的数据源。
[0036]根据业务场景确定数据获取SQL：SQL就是数据查询语句，比如根据用户UUID获取用户其他信息，那么过滤条件就是用户UUID，返回的结果就是该用户的比如性别，最后活跃时间等等；又比如上面说的用户近7天消费最多的3个直播间，那么SQL的过滤条件就会是，对这张消费记录表，以用户作为分组，统计每个用户最近7天在每个直播间的消费金额，然后取每个用户消费了最多的3个直播间，返回给客户端。
[0037]步骤S22、获取第三信息，所述第三信息包括所述配置信息构建本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据获取方法，其特征在于，包括：获取第一信息，所述第一信息包括客户端发送的需求信息；响应于所述第一信息，根据所述需求信息构建对应的配置信息和HTTP接口；获取第二信息，所述第二信息包括所述客户端从所述HTTP接口发起的HTTP请求信息；响应于所述第二信息，将所述HTTP请求信息与对应的配置信息进行分析，得到第一分析结果，根据所述第一分析结果在数据库中获取数据并返回给所述客户端。2.根据权利要求1所述的数据获取方法，其特征在于，响应于所述第一信息，根据所述需求信息构建对应的配置信息和HTTP接口，包括：响应于所述第一信息，根据所述需求信息构建对应的配置信息，每个所述需求信息对应一个所述配置信息，所述配置信息包括第一获取唯一标识、数据获取逻辑、必填项和可访问的客户端，所述数据获取逻辑包括获取数据的数据源和数据查询语句；获取第三信息，所述第三信息包括所述配置信息构建完成的信息；响应于所述第三信息，为所述客户端提供统一的HTTP接口。3.根据权利要求2所述的数据获取方法，其特征在于，响应于所述第二信息，将所述HTTP请求信息与对应的配置信息进行分析，得到第一分析结果，根据所述第一分析结果在数据库中获取数据并返回给所述客户端，包括：API服务器将所述HTTP请求信息与对应的配置信息进行分析，其中，所述HTTP请求信息中包括第二数据获取唯一标识、过滤条件和令牌信息；在所述配置信息中找到与所述第二数据获取唯一标识相同的第一数据获取唯一标识，并将所述第一数据获取唯一标识对应的配置信息读取出来；分析此配置信息中的可访问的客户端是否包含所述令牌信息，同时分析所述过滤条件中是否包含所述必填项，若均包含则根据所述配置信息中的数据获取逻辑从数据库中获取数据并返回给所述客户端。4.根据权利要求3所述的数据获取方法，其特征在于，根据所述分析结果在数据库中获取数据并返回给客户端，还包括：对所述HTTP请求信息进行分析，分析所述HTTP请求信息中是否包括分页信息和数据排序信息，得到第二分析结果；对所述第二分析结果进行解读，若所述HTTP请求信息中包括分页信息和数据排序信息，则在从数据库中获取数据后，按照所述分析信息和所述数据排序信息对数据进行处理，处理后再返回给所述客户端。5.一种数据获取装置，其特征在于，包括：第一获取模块，用于获取第一信息，所述第一信息包括客户端发送的需求信息；第一响应模块，用于响应于所述...

【专利技术属性】
技术研发人员：黄天财，黄海波，黄俊杰，吕金松，陈泽钰，李庆勇，
申请(专利权)人：厦门她趣信息技术有限公司，
类型：发明
国别省市：