一种识别请求的方法及网站服务器技术

本发明专利技术实施例提供一种识别请求的方法及网站服务器，其中方法包括：获取接入网站的请求；判断所述请求是否携带蜘蛛标识；若所述请求中携带蜘蛛标识，确定所述请求的IP地址；根据所述IP地址，判断所述请求是否由搜索公司发出；若所述请求由搜索公司发出，则确定所述请求为合法蜘蛛请求；若所述请求不是由搜索公司发出，则确定所述请求为伪造的蜘蛛请求。本发明专利技术可从接入网站的请求中有效识别出伪造的蜘蛛请求，为后续屏蔽伪造的蜘蛛请求，保证网站信息的安全提供了可能。

【技术实现步骤摘要】

本专利技术涉及搜索
，具体涉及一种识别请求的方法及网站服务器。
技术介绍
蜘蛛请求(又被称为网页蜘蛛，网络机器人)是一种按照一定规则，自动的抓取互联网信息的程序或者脚本；蜘蛛请求一般由提供搜索服务的搜索公司发出，搜索公司通过蜘蛛请求可定向抓取相关的网站信息(如网站的网页信息等)，并将抓取到的网站信息整合到搜索引擎中，提升搜索引擎输出搜索结果的全面性和准确性；由于网站信息被蜘蛛请求抓取后，能够被搜索公司整合入搜索引擎中，提升网站被用户搜索到的可能性，因此大多数的网站对于由搜索公司所发出的蜘蛛请求是持欢迎态度的，并不对其进行屏蔽。本专利技术的专利技术人在研宄过程中发现，目前一些非搜索公司出于窃取网站信息的目的，存在伪造蜘蛛请求，恶意采集网站信息的情况；出于保证网站信息的安全，对于伪造的蜘蛛请求进行识别，从而在后续加以屏蔽，显得尤为必要；然而，伪造的蜘蛛请求与由搜索公司发出的合法蜘蛛请求在内容上基本一致，目前并没有一种能够有效识别伪造的蜘蛛请求的技术。因此，如何提供一种能够识别伪造的蜘蛛请求的方法，成为本领域技术人员需要考虑的问题。
技术实现思路
有鉴于此，本专利技术实施例提供一种识别请求的方法及网站服务器，以实现有效识别伪造的蜘蛛请求的目的。为实现上述目的，本专利技术实施例提供如下技术方案:一种识别请求的方法，包括:获取接入网站的请求；判断所述请求是否携带蜘蛛标识；若所述请求中携带蜘蛛标识，确定所述请求的IP地址；根据所述IP地址，判断所述请求是否由搜索公司发出；若所述请求由搜索公司发出，则确定所述请求为合法蜘蛛请求；若所述请求不是由搜索公司发出，则确定所述请求为伪造的蜘蛛请求。其中，所述方法还包括:放行所述合法蜘蛛请求，以便所述合法蜘蛛请求抓取网站信息；屏蔽所述伪造的蜘蛛请求。其中，所述根据所述IP地址，判断所述请求是否由搜索公司发出包括:判断所述IP地址是否为合法IP地址，所述合法IP地址为搜索公司对应的IP地址；若是，则确定所述请求由搜索公司发出；若否，则确定所述请求不是由搜索公司发出。其中，所述判断所述IP地址是否为合法IP地址包括:调取预设的合法IP地址，判断所述IP地址是否与预设的合法IP地址对应，若是，则确定所述IP地址为合法IP地址，若否，则确定所述IP地址不为合法IP地址；或，确定所述IP地址对应的域名信息，判断所述域名信息是否与预设的搜索公司的域名信息对应，若是，则确定所述IP地址为合法IP地址，若否，则确定所述IP地址不为合法IP地址。其中，所述根据所述IP地址，判断所述请求是否由搜索公司发出包括:确定所述IP地址的归属地址；判断所述归属地址与设定的搜索公司的所在地址是否对应；若是，则确定所述请求由搜索公司发出；若否，则确定所述请求不是由搜索公司发出。其中，所述根据所述IP地址，判断所述请求是否由搜索公司发出包括:判断所述IP地址是否为合法IP地址，所述合法IP地址为搜索公司对应的IP地址；若否，则确定所述请求不是由搜索公司发出；若是，确定所述IP地址的归属地址，并判断所述归属地址与设定的搜索公司的所在地址是否对应；若所述归属地址与设定的搜索公司的所在地址相对应，则确定所述请求由搜索公司发出；若所述归属地址与设定的搜索公司的所在地址不对应，则确定所述请求不是由搜索公司发出。本专利技术实施例还提供一种网站服务器，包括:请求获取模块，用于获取接入网站的请求；标识判断模块，用于判断所述请求是否携带蜘蛛标识；地址确定模块，用于若所述请求中携带蜘蛛标识，确定所述请求的IP地址；判断模块，用于根据所述IP地址，判断所述请求是否由搜索公司发出；第一结果确定模块，用于若所述请求由搜索公司发出，则确定所述请求为合法蜘蛛请求；第二结果确定模块，用于若所述请求不是由搜索公司发出，则确定所述请求为伪造的蜘蛛请求。其中，所述判断模块包括:第一地址合法判断单元，用于判断所述IP地址是否为合法IP地址，所述合法IP地址为搜索公司对应的IP地址；第一合法确定单元，用于若第一地址合法判断单元的判断结果为是，则确定所述请求由搜索公司发出；第二合法确定单元，用于若第一地址合法判断单元的判断结果为否，则确定所述请求不是由搜索公司发出；所述地址合法判断单元包括:第一判断执行子单元，用于调取预设的合法IP地址，判断所述IP地址是否与预设的合法IP地址对应，若是，则确定所述IP地址为合法IP地址，若否，则确定所述IP地址不为合法IP地址；或，第二判断执行子单元，用于确定所述IP地址对应的域名信息，判断所述域名信息是否与预设的搜索公司的域名信息对应，若是，则确定所述IP地址为合法IP地址，若否，则确定所述IP地址不为合法IP地址。其中，所述判断模块包括:第一归属地址判断单元，用于确定所述IP地址的归属地址，判断所述归属地址与设定的搜索公司的所在地址是否对应；第一地址确定单元，用于若所述第一归属地址判断单元的判断结果为是，则确定所述请求由搜索公司发出；第二地址确定单元，用于若所述第一归属地址判断单元的判断结果为否，则确定所述请求不是由搜索公司发出。其中，所述判断模块包括:第二地址合法判断单元，用于判断所述IP地址是否为合法IP地址，所述合法IP地址为搜索公司对应的IP地址；第一确定单元，用于若所述第二地址合法判断单元的判断结果为否，则确定所述请求不是由搜索公司发出；第二归属地址判断单元，用于若第二地址合法判断单元的判断结果为是，确定所述IP地址的归属地址，并判断所述归属地址与设定的搜索公司的所在地址是否对应；第二确定单元，用于若所述第二归属地址判断单元的判断结果为是，则确定所述请求由搜索公司发出；第三确定单元，用于若所述第二归属地址判断单元的判断结果为否，则确定所述请求不是由搜索公司发出。基于上述技术方案，本专利技术实施例提供的识别请求的方法，包括:获取接入网站的请求；判断所述请求是否携带蜘蛛标识；若所述请求中携带蜘蛛标识，确定所述请求的IP地址；根据所述IP地址，判断所述请求是否由搜索公司发出；若所述请求由搜索公司发出，则确定所述请求为合法蜘蛛请求；若所述请求不是由搜索公司发出，则确定所述请求为伪造的蜘蛛请求。可以看出，本专利技术实施例通过蜘蛛标识，可从接入网站的请求中确定出请求的识别范围，即合法蜘蛛请求和伪造的蜘蛛请求；从而根据携带有蜘蛛标识的请求的IP地址，判断所述请求是否由搜索公司，当确定所述请求由搜索公司发出时，则确定所述请求为合法蜘蛛请求，当确定所述请求不是由搜索公司发出时，贝lJ确定所述请求为伪造的蜘蛛请求；进而实现从接入网站的请求中有效识别伪造的蜘蛛请求的目的，为后续屏蔽伪造的蜘蛛请求，保证网站信息的安全提供了可能。【附图说明】为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。图当前第1页1 2 3 4 本文档来自技高网...

【技术保护点】
一种识别请求的方法，其特征在于，包括：获取接入网站的请求；判断所述请求是否携带蜘蛛标识；若所述请求中携带蜘蛛标识，确定所述请求的IP地址；根据所述IP地址，判断所述请求是否由搜索公司发出；若所述请求由搜索公司发出，则确定所述请求为合法蜘蛛请求；若所述请求不是由搜索公司发出，则确定所述请求为伪造的蜘蛛请求。

【技术特征摘要】

【专利技术属性】
技术研发人员：李国强，周坤朋，孟伟，王路，
申请(专利权)人：郑州悉知信息技术有限公司，
类型：发明
国别省市：河南;41