本发明专利技术实施例公开了一种获取隐性关系的方法和装置及计算机可读存储介质,包括:根据隐性关系的查询条件和隐性关系需要满足的规则确定预先以表格形式存储在数据库中的原始数据中需要创建索引的字段,获取确定出的字段对应的索引;根据确定出的字段对应的索引在预先以表格形式存储在数据库中的原始数据中查找满足查询条件的原始数据,根据所述隐性关系需要满足的规则计算查找到的满足查询条件的原始数据与不满足查询条件的原始数据之间是否具有隐性关系。本发明专利技术实施例通过获取相应字段的索引,基于获得的相应字段的索引来实现数据的查询和隐性关系的计算,提高了隐性关系的获取速度。
A method and device for obtaining implicit relation and computer readable storage medium
【技术实现步骤摘要】
一种获取隐性关系的方法和装置及计算机可读存储介质
本专利技术实施例涉及但不限于数据挖掘技术,尤指一种获取隐性关系的方法和装置及计算机可读存储介质。
技术介绍
显性关系是指不需要进行计算就能获得的关系,例如,户口本上每一个人与户主的关系在户口本上直接就体现出来,并不需要做额外的计算;而隐性关系是指需要进行计算才能提取的关系,例如,同住关系,需要根据酒店的入住信息表进行相关的计算才能得出。相关技术在查询具有隐性关系的数据之前,预先将原始数据存储在关系型数据库中,采用MR计算引擎计算原始数据之间是否具有隐性关系,将具有同一隐性关系的所有原始数据存储在关系型数据库中的同一张表格中,表格的名称为原始数据之间存在的隐性关系;在查询具有隐性关系的数据时,需要先将所有具有隐性关系的数据加载到内存中,用户通过输入隐性关系的名称即可查询到内存中的具有输入的隐性关系的所有数据。相关技术中,MR计算引擎在计算隐性关系时,计算速度比较慢,无法实现线上实时计算。
技术实现思路
本专利技术实施例提供了一种获取隐性关系的方法和装置及计算机可读存储介质,能够提高隐性关系的获取速度。本专利技术实施例提供了一种获取隐性关系的方法,包括:根据隐性关系的查询条件和隐性关系需要满足的规则确定预先以表格形式存储在数据库中的原始数据中需要创建索引的字段,获取确定出的字段对应的索引;根据确定出的字段对应的索引在预先以表格形式存储在数据库中的原始数据中查找满足查询条件的原始数据,根据所述隐性关系需要满足的规则计算查找到的满足查询条件的原始数据与不满足查询条件的原始数据之间是否具有隐性关系。在本专利技术实施例中,所述根据隐性关系的查询条件和隐性关系需要满足的规则确定预先以表格形式存储在数据库中的原始数据中需要创建索引的字段之前,该方法还包括:接收到查询请求;其中,查询请求包括:所述隐性关系的查询条件和所述隐性关系需要满足的规则;所述根据所述隐性关系需要满足的规则计算查找到的满足查询条件的原始数据与不满足查询条件的原始数据之间是否具有隐性关系后,该方法还包括:输出不满足查询条件的原始数据中,与查找到的满足查询条件的原始数据之间具有隐性关系的原始数据。在本专利技术实施例中,所述根据隐性关系的查询条件和隐性关系需要满足的规则确定预先以表格形式存储在数据库中的原始数据中需要创建索引的字段之前,该方法还包括:预先将所述原始数据以表格形式存储在数据库中。在本专利技术实施例中,所述预先将所述原始数据以表格形式存储在数据库中包括:预先将所述原始数据以表格形式存储在分布式存储系统Hbase列式数据库中;所述接收到查询请求之前,该方法还包括:采用Phoenix创建所述Hbase列式数据库中的原始数据对应的表;所述根据隐性关系的查询条件和隐性关系需要满足的规则确定预先以表格形式存储在数据库中的原始数据中需要创建索引的字段包括:根据所述隐性关系的查询条件和隐性关系需要满足的规则确定创建的表中需要创建索引的字段;所述根据确定出的字段对应的索引在预先以表格形式存储在数据库中的原始数据中查找满足查询条件的原始数据包括:根据所述确定出的字段对应的索引在创建的表中查找满足查询条件的原始数据。在本专利技术实施例中,所述隐性关系的查询条件包括至少一个查询项,每一个所述查询项包括:查询类型、查询字段和查询内容;所述隐性关系需要满足的规则包括至少一个比较项,每一个所述比较项包括:比较类型和比较字段。在本专利技术实施例中,所述根据所述隐性关系需要满足的规则计算查找到的满足查询条件的原始数据与不满足查询条件的原始数据之间是否具有隐性关系包括:根据所述确定出的字段对应的索引在不满足查询条件的原始数据中,查找与查找到的满足查询条件的原始数据之间满足比较类型为等于的比较项的原始数据,根据隐性关系需要满足的规则中比较类型不是等于的比较项计算查找到的满足查询条件的原始数据之间满足比较类型为等于的比较项的原始数据,与查找到的满足查询条件的原始数据之间是否具有隐性关系。在本专利技术实施例中,所述获取确定出的字段对应的索引包括以下任意一个或多个的组合:当已创建索引的字段中包含所述确定出的字段时,从已创建的索引中获取所述确定出的字段对应的索引;当所述已创建索引的字段中不包含所述确定出的字段时,创建所述确定出的字段对应的索引。在本专利技术实施例中,所述确定出的字段对应的索引为Phoenix二级索引。本专利技术实施例提出了一种获取隐性关系的装置,包括处理器和计算机可读存储介质,所述计算机可读存储介质中存储有指令,当所述指令被所述处理器执行时,实现上述任一种获取隐性关系的方法。本专利技术实施例还提出了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述任一种获取隐性关系的方法的步骤。本专利技术一个实施例包括:根据隐性关系的查询条件和隐性关系需要满足的规则确定预先以表格形式存储在数据库中的原始数据中需要创建索引的字段,获取确定出的字段对应的索引;根据确定出的字段对应的索引在预先以表格形式存储在数据库中的原始数据中查找满足查询条件的原始数据,根据所述隐性关系需要满足的规则计算查找到的满足查询条件的原始数据与不满足查询条件的原始数据之间是否具有隐性关系。本专利技术实施例通过获取相应字段的索引,基于获得的相应字段的索引来实现数据的查询和隐性关系的计算,提高了隐性关系的获取速度。在本专利技术另一个实施例中,所述根据隐性关系的查询条件和隐性关系需要满足的规则确定预先以表格形式存储在数据库中的原始数据中需要创建索引的字段之前,该方法还包括:接收到查询请求;其中,查询请求包括:所述隐性关系的查询条件和所述隐性关系需要满足的规则;所述根据所述隐性关系需要满足的规则计算查找到的满足查询条件的原始数据与不满足查询条件的原始数据之间是否具有隐性关系后,该方法还包括:输出不满足查询条件的原始数据中,与查找到的满足查询条件的原始数据之间满足隐性关系需要满足的规则的原始数据。本专利技术实施例在接收到查询请求以后,基于查询请求获取相应字段的索引,基于获得的相应字段的索引来实现数据的查询和隐性关系的计算,最终得到具有隐性关系的数据,实现了在进行具有隐性关系的数据的查询时再进行隐性关系的计算,从而隐性关系需要满足的规则可以随意修改,不需要额外的存储,并基于索引提高了查询效率。本专利技术实施例的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本专利技术实施例而了解。本专利技术实施例的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。附图说明附图用来提供对本专利技术实施例技术方案的进一步理解,并且构成说明书的一部分,与本专利技术实施例的实施例一起用于解释本专利技术实施例的技术方案,并不构成对本专利技术实施例技术方案的限制。图1为本专利技术一个实施例提出的获取隐性关系的方法的流程图;图2为本本文档来自技高网...
【技术保护点】
1.一种获取隐性关系的方法,包括:/n根据隐性关系的查询条件和所述隐性关系需要满足的规则确定预先以表格形式存储在数据库中的原始数据中需要创建索引的字段,获取确定出的字段对应的索引;/n根据所述确定出的字段对应的索引在所述预先以表格形式存储在数据库中的原始数据中查找满足查询条件的原始数据,根据所述隐性关系需要满足的规则计算查找到的满足查询条件的原始数据与不满足查询条件的原始数据之间是否具有隐性关系。/n
【技术特征摘要】
1.一种获取隐性关系的方法,包括:
根据隐性关系的查询条件和所述隐性关系需要满足的规则确定预先以表格形式存储在数据库中的原始数据中需要创建索引的字段,获取确定出的字段对应的索引;
根据所述确定出的字段对应的索引在所述预先以表格形式存储在数据库中的原始数据中查找满足查询条件的原始数据,根据所述隐性关系需要满足的规则计算查找到的满足查询条件的原始数据与不满足查询条件的原始数据之间是否具有隐性关系。
2.根据权利要求1所述的方法,其特征在于,所述根据隐性关系的查询条件和隐性关系需要满足的规则确定预先以表格形式存储在数据库中的原始数据中需要创建索引的字段之前,该方法还包括:
接收到查询请求;其中,查询请求包括:所述隐性关系的查询条件和所述隐性关系需要满足的规则;
所述根据所述隐性关系需要满足的规则计算查找到的满足查询条件的原始数据与不满足查询条件的原始数据之间是否具有隐性关系后,该方法还包括:
输出所述不满足查询条件的原始数据中,与查找到的满足查询条件的原始数据之间具有隐性关系的原始数据。
3.根据权利要求1所述的方法,其特征在于,所述根据隐性关系的查询条件和隐性关系需要满足的规则确定预先以表格形式存储在数据库中的原始数据中需要创建索引的字段之前,该方法还包括:预先将所述原始数据以表格形式存储在数据库中。
4.根据权利要求3所述的方法,其特征在于,其中,所述预先将所述原始数据以表格形式存储在数据库中包括:
预先将所述原始数据以表格形式存储在分布式存储系统Hbase列式数据库中;所述接收到查询请求之前,该方法还包括:
采用Phoenix创建所述Hbase列式数据库中的原始数据对应的表;
所述根据隐性关系的查询条件和隐性关系需要满足的规则确定预先以表格形式存储在数据库中的原始数据中需要创建索引的字段包括:
根据所述隐性关系的查询条件和隐性关系需要满足的规则确定创建的表中需要创建索引的字段;
所述根据确定出的字段对应的索引在预先以表格形式存储在数据...
【专利技术属性】
技术研发人员:何海鸿,
申请(专利权)人:北京明略软件系统有限公司,
类型:发明
国别省市:北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。