代理IP地址分配方法、装置、计算机设备和可读存储介质制造方法及图纸

技术编号:25695422 阅读:25 留言:0更新日期:2020-09-18 21:06
本申请涉及一种代理IP地址分配方法、装置、计算机设备和可读存储介质。其中,该代理IP地址分配方法包括:第一节点获取第二节点发送的代理IP地址请求消息,其中,代理IP地址请求消息中携带目的地址;第一节点获取对目的地址的历史访问记录;第一节点根据历史访问记录,确定代理IP地址库中各个代理IP地址在第一预设时间段内访问目的地址的访问次数;第一节点选取访问次数小于第一预设阈值的第一代理IP地址;第一节点将第一代理IP地址发送给第二节点。通过本申请,解决了相关技术中代理IP地址被禁用的可能性高的问题,降低了代理IP地址被禁用的可能性。

【技术实现步骤摘要】
代理IP地址分配方法、装置、计算机设备和可读存储介质
本申请涉及计算机领域,特别是涉及代理IP地址分配方法、装置、计算机设备和计算机可读存储介质。
技术介绍
随着网络安全的发展,很多网站针对IP(互联网协议地址)请求次数和频率增加了检测的功能,一旦IP被封禁,那么数据采集的工作将无法顺利进行。为了避免该问题,一般都通过代理IP地址来进行网站访问。但是采用代理IP地址依旧存在被封禁的问题。现有技术中针对代理IP地址被封禁后的处理方式为重启路由器,即更换代理IP地址,代理IP地址会自动重新拨号,使用新的代理IP地址进行抓取。这种方案只适用于虚拟专用服务器拨号上网,且该方案是在代理IP地址被禁用后才采取该措施,无法及时自动检测到代理IP地址状态,更无法减少代理IP地址被禁用的可能性,因此存在代理IP地址被禁用的可能性高的问题。目前针对相关技术中代理IP地址被禁用的可能性高的问题,尚未提出有效的解决方案。
技术实现思路
本申请实施例提供了一种代理IP地址分配方法、装置、计算机设备和计算机可读存储介质,以至少解决相关技术中代理IP地址被禁用的可能性高的问题。第一方面,本申请实施例提供了一种代理IP地址分配方法,所述方法包括:第一节点获取第二节点发送的代理IP地址请求消息,其中,所述代理IP地址请求消息中携带目的地址;所述第一节点获取对所述目的地址的历史访问记录;所述第一节点根据所述历史访问记录,确定代理IP地址库中各个代理IP地址在第一预设时间段内访问所述目的地址的访问次数;所述第一节点选取所述访问次数小于第一预设阈值的第一代理IP地址;所述第一节点将所述第一代理IP地址发送给所述第二节点。在其中一些实施例中,在所述第一节点选取所述访问次数小于第一预设阈值的第一代理IP地址之后,所述方法还包括:所述第一节点确定所述第一代理IP地址的数量;在所述第一代理IP地址的数量少于第二预设阈值的情况下,所述第一节点生成用于指示所述第一代理IP地址数量异常的第一预警消息,并发送所述第一预警消息至预设对象。在其中一些实施例中,所述方法还包括:在所述第二节点请求代理IP地址失败的情况下,所述第一节点生成用于指示所述第二节点请求代理IP地址异常的第二预警消息,并发送所述第二预警消息至预设对象。在其中一些实施例中,在所述第二节点请求代理IP地址失败的情况下,所述第一节点生成用于指示所述第二节点请求代理IP地址异常的第二预警消息至预设对象包括:在所述第二节点请求代理IP地址失败的情况下,所述第一节点生成请求失败记录;所述第一节点在第二预设时间段内所述请求失败记录对应的数量大于第三预设阈值,或者在第二预设时间段内根据所述请求失败记录确定的请求失败率大于第四预设阈值的情况下,生成用于指示所述第二节点请求代理IP地址异常的第二预警消息,并发送所述第二预警消息至预设对象。在其中一些实施例中,所述预设对象是由用户预先配置的,所述预设对象包括以下至少之一:邮件地址、即时通讯账户地址、短信地址。在其中一些实施例中,所述方法还包括:所述第一节点根据用户的输入操作,对所述代理IP地址库中的代理IP地址进行删除、更新或新增,其中,所述用户的输入操作包括以下至少之一:用户录入代理IP地址、用户导入代理IP地址文件。在其中一些实施例中,在所述第一节点将所述第一代理IP地址发送给所述第二节点之后,所述方法还包括:所述第二节点使用所述第一代理IP地址访问所述目的地址,并将访问记录更新到所述历史访问记录。第二方面,本申请实施例还提供了一种代理IP地址分配装置,应用于第一节点,所述装置包括:第一获取模块,用于获取第二节点发送的代理IP地址请求消息,其中,所述代理IP地址请求消息中携带目的地址;第二获取模块,用于获取对所述目的地址的历史访问记录;第一确定模块,用于根据所述历史访问记录,确定代理IP地址库中各个代理IP地址在第一预设时间段内访问所述目的地址的访问次数;选取模块,用于选取所述访问次数小于第一预设阈值的第一代理IP地址;发送模块,用于将所述第一代理IP地址发送给所述第二节点。第三方面,本申请实施例提供了一种计算机设备,包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上述第一方面所述的代理IP地址分配方法。第四方面,本申请实施例提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如上述第一方面所述的代理IP地址分配方法。相比于相关技术,本申请实施例提供的代理IP地址分配方法、装置、计算机设备和可读存储介质,通过第一节点获取第二节点发送的代理IP地址请求消息,其中,代理IP地址请求消息中携带目的地址;第一节点获取对目的地址的历史访问记录;第一节点根据历史访问记录,确定代理IP地址库中各个代理IP地址在第一预设时间段内访问目的地址的访问次数;第一节点选取访问次数小于第一预设阈值的第一代理IP地址;第一节点将第一代理IP地址发送给第二节点的方式,解决了相关技术中代理IP地址被禁用的可能性高的问题,降低了代理IP地址被禁用的可能性。本申请的一个或多个实施例的细节在以下附图和描述中提出,以使本申请的其他特征、目的和优点更加简明易懂。附图说明此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:图1是根据本申请实施例的代理IP地址分配方法的流程图;图2是根据本申请优选实施例的第一节点的结构框图;图3是根据本申请优选实施例的预警方法的流程图;图4是根据本申请实施例的代理IP地址分配装置的结构框图;图5是根据本申请实施例的计算机设备的硬件结构示意图。具体实施方式为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行描述和说明。应当理解,此处所描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。基于本申请提供的实施例,本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。显而易见地,下面描述中的附图仅仅是本申请的一些示例或实施例,对于本领域的普通技术人员而言,在不付出创造性劳动的前提下,还可以根据这些附图将本申请应用于其他类似情景。此外,还可以理解的是,虽然这种开发过程中所作出的努力可能是复杂并且冗长的,然而对于与本申请公开的内容相关的本领域的普通技术人员而言,在本申请揭露的
技术实现思路
的基础上进行的一些设计,制造或者生产等变更只是常规的技术手段,不应当理解为本申请公开的内容不充分。在本申请中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出本文档来自技高网
...

【技术保护点】
1.一种代理IP地址分配方法,其特征在于,所述方法包括:/n第一节点获取第二节点发送的代理IP地址请求消息,其中,所述代理IP地址请求消息中携带目的地址;/n所述第一节点获取对所述目的地址的历史访问记录;/n所述第一节点根据所述历史访问记录,确定代理IP地址库中各个代理IP地址在第一预设时间段内访问所述目的地址的访问次数;/n所述第一节点选取所述访问次数小于第一预设阈值的第一代理IP地址;/n所述第一节点将所述第一代理IP地址发送给所述第二节点。/n

【技术特征摘要】
1.一种代理IP地址分配方法,其特征在于,所述方法包括:
第一节点获取第二节点发送的代理IP地址请求消息,其中,所述代理IP地址请求消息中携带目的地址;
所述第一节点获取对所述目的地址的历史访问记录;
所述第一节点根据所述历史访问记录,确定代理IP地址库中各个代理IP地址在第一预设时间段内访问所述目的地址的访问次数;
所述第一节点选取所述访问次数小于第一预设阈值的第一代理IP地址;
所述第一节点将所述第一代理IP地址发送给所述第二节点。


2.根据权利要求1所述的代理IP地址分配方法,其特征在于,在所述第一节点选取所述访问次数小于第一预设阈值的第一代理IP地址之后,所述方法还包括:
所述第一节点确定所述第一代理IP地址的数量;
在所述第一代理IP地址的数量少于第二预设阈值的情况下,所述第一节点生成用于指示所述第一代理IP地址数量异常的第一预警消息,并发送所述第一预警消息至预设对象。


3.根据权利要求1所述的代理IP地址分配方法,其特征在于,所述方法还包括:
在所述第二节点请求代理IP地址失败的情况下,所述第一节点生成用于指示所述第二节点请求代理IP地址异常的第二预警消息,并发送所述第二预警消息至预设对象。


4.根据权利要求3所述的代理IP地址分配方法,其特征在于,在所述第二节点请求代理IP地址失败的情况下,所述第一节点生成用于指示所述第二节点请求代理IP地址异常的第二预警消息至预设对象包括:
在所述第二节点请求代理IP地址失败的情况下,所述第一节点生成请求失败记录;
所述第一节点在第二预设时间段内所述请求失败记录对应的数量大于第三预设阈值,或者在第二预设时间段内根据所述请求失败记录确定的请求失败率大于第四预设阈值的情况下,生成用于指示所述第二节点请求代理IP地址异常的第二预警消息,并发送所述第二预警消息至...

【专利技术属性】
技术研发人员:赵峥范渊
申请(专利权)人:杭州安恒信息技术股份有限公司
类型:发明
国别省市:浙江;33

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1