用于搜索引擎集群分流的方法、装置及系统制造方法及图纸

技术编号:20592863 阅读:14 留言:0更新日期:2019-03-16 09:03
本申请公开一种用于搜索引擎集群分流的方法、装置及系统。涉及计算机信息处理领域,该方法包括:获取配置信息;根据所述配置信息进行初始化处理,生成分配信息,所述初始化处理包括取模处理;根据所述分配信息确定待链接的搜索引擎集群;以及由所述待链接的搜索引擎集群获取链接数据。本申请公开的用于搜索引擎集群分流的方法,能够在客户端请求异地多个企业级搜索应用服务器的数据中心时,实现流量动态切换,并灵活控制流量比例。

Method, Device and System for Search Engine Cluster Diversion

This application discloses a method, device and system for search engine cluster shunting. The method involves the field of computer information processing, which includes acquiring configuration information, initializing according to the configuration information and generating distribution information. The initialization process includes module processing, determining search engine cluster to be linked according to the distribution information, and acquiring link data from the search engine cluster to be linked. The method disclosed in this application for search engine cluster shunting can realize dynamic traffic switching and flexible control of traffic proportion when clients request data centers of multiple enterprise search application servers in different places.

【技术实现步骤摘要】
用于搜索引擎集群分流的方法、装置及系统
本专利技术涉及计算机信息处理领域,具体而言,涉及一种用于搜索引擎集群分流的方法、装置及系统。
技术介绍
在企业应用中经常会将数据库或企业级搜索应用服务器集群等服务部署在多个机房形成异地多个的数据中心,从而满足异地容灾、流量均衡的需求。其中,企业级搜索应用服务器集群可例如为solr集群。而且,上述面对多个数据中心集群服务的情况,在某机房网络故障或机房流量过大等情况时会还会产生请求数据中心流量动态切换的实际需求。在现有技术中,面对上述问题通常有如下两种解决方案。方案一:一个solr集群作为主数据中心进行数据读写,其他集群做备份仅同步数据,在需要时做流量的全量切换。这种方式以单一数据中心作为主数据中心,达不到流量均衡的效果,而且还会造成一定的资源浪费。方案二:根据轮询策略随机访问某一solr集群的数据中心。这种方式使用轮询策略随机访问流量中心,需要保证数据读写的严格实时性,具体的技术实现起来比较困难。同时也不能实现数据中心按比例分流,不能实现指定部分商家到某一数据中心的实际需求。因此,需要一种新的用于搜索引擎集群分流的方法、装置及系统。在所述
技术介绍
部分公开的上述信息仅用于加强对本专利技术的背景的理解,因此它可以包括不构成对本领域普通技术人员已知的现有技术的信息。
技术实现思路
有鉴于此,本专利技术提供一种用于搜索引擎集群分流的方法、装置及系统,能够在客户端请求异地多个企业级搜索应用服务器的数据中心时,实现流量动态切换,并灵活控制流量比例。本专利技术的其他特性和优点将通过下面的详细描述变得显然,或部分地通过本专利技术的实践而习得。根据本专利技术的一方面,提出一种用于搜索引擎集群分流的方法,该方法包括:获取配置信息;根据配置信息进行初始化处理,生成分配信息,初始化处理包括取模处理;根据分配信息确定待链接的搜索引擎集群;以及由待链接的搜索引擎集群获取链接数据。在本公开的一种示例性实施例中,获取配置信息,包括:通过分布式应用程序协调服务获取配置信息。在本公开的一种示例性实施例中,还包括:在分布式应用程序协调服务中,根据商家ID设置配置信息。在本公开的一种示例性实施例中,根据配置信息进行初始化处理,生成分配信息,包括:通过配置信息获取路由规则;解析路由规则;以及根据解析后的路由规则,生成分配信息。在本公开的一种示例性实施例中,根据解析后的路由规则,生成分配信息,包括:将解析后的路由规则进行取模处理,生成取模结果;通过取模结果生成分配信息。在本公开的一种示例性实施例中,根据分配信息确定待链接的搜索引擎集群,包括:通过取模结果确定待链接的搜索引擎集群。在本公开的一种示例性实施例中,由待链接的搜索引擎集群获取链接数据,包括:通过待链接的搜索引擎集群确定待链接的机房信息;以及通过待链接的机房信息获取链接数据。在本公开的一种示例性实施例中,由待链接的搜索引擎集群获取链接数据,包括:由待链接的搜索引擎集群获取SorlCloud链接数据。在本公开的一种示例性实施例中,还包括:监听配置信息变化,实时获取更新后的配置信息。在本公开的一种示例性实施例中,监听配置信息变化,实时获取更新后的配置信息,包括:通过配置监听器,监听分布式应用程序协调服务的配置,实时获取更新后的配置信息。根据本专利技术的一方面,提出一种用于搜索引擎集群分流的装置,该装置包括:配置模块,用于获取配置信息;分配模块,用于根据配置信息进行初始化处理,生成分配信息,初始化处理包括取模处理;引擎模块,用于根据分配信息确定待链接的搜索引擎集群;以及链接模块,用于由待链接的搜索引擎集群获取链接数据。在本公开的一种示例性实施例中,还包括:监听模块,用于监听配置信息变化,实时获取更新后的配置信息。根据本专利技术的一方面,提出一种用于搜索引擎集群分流的系统,该系统包括:路由子系统,用于获取配置信息;根据配置信息进行初始化处理,生成分配信息,初始化处理包括取模处理;根据分配信息确定待链接的搜索引擎集群;搜索引擎集群,用于提供链接数据给路由子系统;以及分布式应用程序协调服务子系统;用于生成配置信息。根据本专利技术的一方面,提出一种电子设备,该电子设备包括:一个或多个处理器;存储装置,用于存储一个或多个程序;当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现如上文的方法。根据本专利技术的一方面,提出一种计算机可读介质,其上存储有计算机程序,其特征在于,程序被处理器执行时实现如上文中的方法。根据本专利技术的用于搜索引擎集群分流的方法、装置及系统,能够在客户端请求异地多个企业级搜索应用服务器的数据中心时,实现流量动态切换,并灵活控制流量比例。应当理解的是,以上的一般描述和后文的细节描述仅是示例性的,并不能限制本专利技术。附图说明通过参照附图详细描述其示例实施例,本专利技术的上述和其它目标、特征及优点将变得更加显而易见。下面描述的附图仅仅是本专利技术的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。图1是根据一示例性实施例示出的一种用于搜索引擎集群分流的方法的系统架构。图2是根据一示例性实施例示出的一种用于搜索引擎集群分流的方法的流程图。图3是根据另一示例性实施例示出的一种用于搜索引擎集群分流的方法的流程图。图4是根据一示例性实施例示出的一种用于搜索引擎集群分流的装置的框图。图5是根据另一示例性实施例示出的一种用于搜索引擎集群分流的系统的框图。图6是根据一示例性实施例示出的一种电子设备的框图。图7是根据一示例性实施例示出的一种计算机可读介质示意图。具体实施例现在将参考附图更全面地描述示例实施例。然而,示例实施例能够以多种形式实施,且不应被理解为限于在此阐述的实施例;相反,提供这些实施例使得本专利技术将全面和完整,并将示例实施例的构思全面地传达给本领域的技术人员。在图中相同的附图标记表示相同或类似的部分,因而将省略对它们的重复描述。此外,所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施例中。在下面的描述中,提供许多具体细节从而给出对本专利技术的实施例的充分理解。然而,本领域技术人员将意识到,可以实践本专利技术的技术方案而没有特定细节中的一个或更多,或者可以采用其它的方法、组元、装置、步骤等。在其它情况下,不详细示出或描述公知方法、装置、实现或者操作以避免模糊本专利技术的各方面。附图中所示的方框图仅仅是功能实体,不一定必须与物理上独立的实体相对应。即,可以采用软件形式来实现这些功能实体,或在一个或多个硬件模块或集成电路中实现这些功能实体,或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。附图中所示的流程图仅是示例性说明,不是必须包括所有的内容和操作/步骤,也不是必须按所描述的顺序执行。例如,有的操作/步骤还可以分解,而有的操作/步骤可以合并或部分合并,因此实际执行的顺序有可能根据实际情况改变。应理解,虽然本文中可能使用术语第一、第二、第三等来描述各种组件,但这些组件不应受这些术语限制。这些术语乃用以区分一组件与另一组件。因此,下文论述的第一组件可称为第二组件而不偏离本公开概念的教示。如本文中所使用,术语“及/或”包括相关联的列出项目中的任一个及一或多者的所有组合。本领域技术人员可以理解,附图只是示例实施例的示意图,附图本文档来自技高网...

【技术保护点】
1.一种用于搜索引擎集群分流的方法,其特征在于,包括:获取配置信息;根据所述配置信息进行初始化处理,生成分配信息,所述初始化处理包括取模处理;根据所述分配信息确定待链接的搜索引擎集群;以及由所述待链接的搜索引擎集群获取链接数据。

【技术特征摘要】
1.一种用于搜索引擎集群分流的方法,其特征在于,包括:获取配置信息;根据所述配置信息进行初始化处理,生成分配信息,所述初始化处理包括取模处理;根据所述分配信息确定待链接的搜索引擎集群;以及由所述待链接的搜索引擎集群获取链接数据。2.如权利要求1所述的方法,其特征在于,所述获取配置信息,包括:通过分布式应用程序协调服务获取所述配置信息。3.如权利要求2所述的方法,其特征在于,还包括:在分布式应用程序协调服务中,根据商家ID设置所述配置信息。4.如权利要求1所述的方法,其特征在于,所述根据所述配置信息进行初始化处理,生成分配信息,包括:通过所述配置信息获取路由规则;解析所述路由规则;以及根据解析后的路由规则,生成所述分配信息。5.如权利要求4所述的方法,其特征在于,所述根据解析后的路由规则,生成所述分配信息,包括:将所述解析后的路由规则进行取模处理,生成取模结果;通过所述取模结果生成所述分配信息。6.如权利要求5所述的方法,其特征在于,所述根据所述分配信息确定待链接的搜索引擎集群,包括:通过所述取模结果确定所述待链接的搜索引擎集群。7.如权利要求1所述的方法,其特征在于,所述由所述待链接的搜索引擎集群获取链接数据,包括:通过所述待链接的搜索引擎集群确定待链接的机房信息;以及通过待链接的机房信息获取所述链接数据。8.如权利要求1所述的方法,其特征在于,所述由所述待链接的搜索引擎集群获取链接数据,包括:由所述待链接的搜索引擎集群获取SorlCloud链接数据。9.如权利要求1所述的...

【专利技术属性】
技术研发人员:魏广健康韬
申请(专利权)人:北京京东尚科信息技术有限公司北京京东世纪贸易有限公司
类型:发明
国别省市:北京,11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1