索引构建的方法、装置、客户端、服务器及系统制造方法及图纸

技术编号:21714348 阅读:26 留言:0更新日期:2019-07-27 19:12
本申请提出一种索引构建的方法、装置、客户端、服务器及系统。当客户端接收到服务器反馈的第一信息时,即依据hive表生成映射表,并将映射表和索引参数通过索引构建请求发送给服务器,以使服务器接收到该请求后,构建对应的索引。减少了手动建立索引的繁杂过程,从而节约了大量的时间和人力成本,减少了出错的可能性。

Index Construction Method, Device, Client, Server and System

【技术实现步骤摘要】
索引构建的方法、装置、客户端、服务器及系统
本申请涉及检索领域,具体而言,涉及一种索引构建的方法、装置、客户端、服务器及系统。
技术介绍
Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。ElasticSearch是一个基于Lucene的搜索服务器,它提供了一个分布式多用户能力的全文搜索引擎,是当前流行的企业级搜索引擎。目前Hive一般用于离线数据存储,对实时查询和全文检索支持较弱,所以需要结合ElasticSearch实现快速检索。目前ElasticSearch官方提供了基于Hive操作的API应用程序编程接口,但它有一个痛点,无法自动在Elasticsearch中建立索引,并且在建立索引时需要手动配置与Hive对应的数据类型,配错一个就会导致Hive操作Elasticsearch时出现问题,所以手动建立索引是一个非常繁杂的过程。
技术实现思路
本申请的目的在于提供一种索引构建的方法、装置、客户端、服务器及系统,以解决上述问题。本申请实施例采用的技术方案如下:第一方面,本申请实施例提供一种索引构建的方法,应用于客户端,所述方法包括:依据hive表向服务器发送查询信息;其中,所述查询信息携带索引参数,所述索引参数包括所述服务器的ID,所述索引参数存储于所述hive表;当接收到所述服务器反馈的第一信息,生成映射表;其中,所述第一信息表征所述服务器内不存在与所述hive表对应的索引,所述映射表表征所述hive表中的各个字段的数据类型和所述服务器中的各种数据类型之间的映射关系;向所述服务器发送索引构建请求;其中,所述索引构建请求携带所述映射表和所述索引参数。第二方面,本申请实施例提供一种索引构建的装置,应用于客户端,所述装置包括:信息收发模块:用于依据hive表向服务器发送查询信息;其中,所述查询信息携带索引参数,所述索引参数包括所述服务器的ID,所述索引参数存储于所述hive表;处理模块:用于当接收到所述服务器反馈的第一信息,生成映射表;其中,所述第一信息表征所述服务器内不存在与所述hive表对应的索引,所述映射表表征所述hive表中的各个字段的数据类型和所述服务器中的各种数据类型之间的映射关系;所述信息收发模块还用于向所述服务器发送索引构建请求;其中,所述索引构建请求携带所述映射表和所述索引参数。综上所述,相对于现有技术,本申请实施例所提供的一种索引构建的方法及装置中,当客户端接收到服务器反馈的第一信息时,即依据hive表生成映射表,并将映射表和索引参数通过索引构建请求发送给服务器,以使服务器接收到该请求后,构建对应的索引。减少了手动建立索引的繁杂过程,从而节约了大量的时间和人力成本,减少了出错的可能性。第三方面,本申请实施例还提供了一种索引构建的方法,应用于服务器,所述方法包括:接收客户端发送的查询信息;其中,所述查询信息携带索引参数;依据所述索引参数向所述客户端反馈第一信息;其中,所述第一信息表征所述服务器内不存在与所述索引参数对应的索引;当接收到所述客户端发送的索引构建请求时,构建索引;其中,所述索引构建请求携带所述映射表和所述索引参数。第四方面,本申请实施例还提供了一种客户端,所述客户端包括处理器、存储器,所述存储器存储有计算机指令,所述处理器读取并运行所述计算机指令,以执行第一方面所述的索引构建的方法。第五方面,本申请实施例还提供了服务器,所述服务器包括处理器、存储器,所述存储器存储有计算机指令,所述处理器读取并运行所述计算机指令,以执行第三方面所述的索引构建的方法。第六方面,本申请实施例还提供了系统,所述系统包括第五方面所述的服务器和第四方面所述的客户端,所述服务器与所述客户端通过有线或无线的网络进行通讯交互。为使本申请的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。附图说明为了更清楚地说明本申请实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它相关的附图。图1为本申请实施例提供的系统的交互示意图;图2为本申请实施例提供的应用于系统的索引构建的方法的流程示意图;图3为本申请实施例提供的客户端的结构应用示意图;图4为本申请实施例提供的应用于客户端的索引构建的方法的流程示意图;图5为本申请实施例提供的S202的子步骤流程示意图;图6为本申请实施例提供的应用于客户端的索引构建的装置的功能单元示意图;图7为本申请实施例提供的应用于服务器的索引构建的方法的流程示意图;图8为本申请实施例提供的服务器的电路连接框图。图中:10-索引构建系统;200-客户端;201-处理器;202-存储器;203-总线;204-通信接口;300-服务器;301-主控芯片;302-存储单元;303-通信单元;401-信息收发模块;402-处理模块。具体实施方式为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。同时,在本申请的描述中,术语“第一”、“第二”等仅用于区分描述,而不能理解为指示或暗示相对重要性。需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。在本申请的描述中,需要说明的是,术语“上”、“下”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,或者是该申请产品使用时惯常摆放的方位或位置关系,仅是为了便于描述本申请和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本申请的限制。在本申请的描述中,还需要说明的是,除非另有明确的规定和限定,术语“设置”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可本文档来自技高网...

【技术保护点】
1.一种索引构建的方法,应用于客户端,其特征在于,所述方法包括:依据hive表向服务器发送查询信息;其中,所述查询信息携带索引参数,所述索引参数包括所述服务器的ID,所述索引参数存储于所述hive表;当接收到所述服务器反馈的第一信息,生成映射表;其中,所述第一信息表征所述服务器内不存在与所述hive表对应的索引,所述映射表表征所述hive表中的各个字段的数据类型和所述服务器中的各种数据类型之间的映射关系;向所述服务器发送索引构建请求;其中,所述索引构建请求携带所述映射表和所述索引参数。

【技术特征摘要】
1.一种索引构建的方法,应用于客户端,其特征在于,所述方法包括:依据hive表向服务器发送查询信息;其中,所述查询信息携带索引参数,所述索引参数包括所述服务器的ID,所述索引参数存储于所述hive表;当接收到所述服务器反馈的第一信息,生成映射表;其中,所述第一信息表征所述服务器内不存在与所述hive表对应的索引,所述映射表表征所述hive表中的各个字段的数据类型和所述服务器中的各种数据类型之间的映射关系;向所述服务器发送索引构建请求;其中,所述索引构建请求携带所述映射表和所述索引参数。2.如权利要求1所述的索引构建的方法,其特征在于,所述生成映射表的步骤包括:依据所述hive表支持的数据类型和所述服务器支持的数据类型生成映射网络;其中,在所述映射网络中,所述hive表支持的数据类型和所述服务器支持的数据类型一一对应;依据所述映射网络和所述hive表生成所述映射表。3.如权利要求1所述的索引构建的方法,其特征在于,所述索引参数还包括如下任一或组合:端口、索引名称、字段映射、分页数、副本数;所述hive表还包括如下任一或组合:表名称,字段名称,字段类型。4.一种索引构建的装置,应用于客户端,其特征在于,所述装置包括:信息收发模块:用于依据hive表向服务器发送查询信息;其中,所述查询信息携带索引参数,所述索引参数包括所述服务器的ID,所述索引参数存储于所述hive表;处理模块:用于当接收到所述服务器反馈的第一信息,生成映射表;其中,所述第一信息表征所述服务器内不存在与所述hive表对应的索引,所述映射表表征所述hive表中的各个字段的数据类型和所述服务器中的各种数据类型之...

【专利技术属性】
技术研发人员:张永飞杨耀杨尧王诗强
申请(专利权)人:成都四方伟业软件股份有限公司
类型:发明
国别省市:四川,51

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1