链接退场方法、装置、设备及存储介质制造方法及图纸

技术编号:38843503 阅读:14 留言:0更新日期:2023-09-17 09:55
本公开提供了一种链接退场方法、装置、设备及存储介质,涉及计算机技术领域,具体涉及数据处理、链接处理等技术领域,可应用于网站链接退场、终端应用链接退场等场景下。具体实现方案包括:获取待检测链接;按照预设类别对所述待检测链接进行分类,得到每种预设类别对应的待检测链接,所述预设类别是根据所述待检测链接所在的数据库以及所述待检测链接对应的页面类型划分的;并行检测每种所述预设类别对应的待检测链接,得到每种所述预设类别对应的第一无效链接;对每种所述预设类别对应的第一无效链接进行退场。本公开能够提高链接退场效率。效率。效率。

【技术实现步骤摘要】
链接退场方法、装置、设备及存储介质


[0001]本公开涉及计算机
,具体涉及数据处理、链接处理等
,可应用于网站链接退场、终端应用链接退场等场景下,尤其涉及一种链接退场方法、装置、设备及存储介质。

技术介绍

[0002]无效链接是指Web网站中处于路径不可达状态的Web链接,它是导致网站性能下降的重要原因之一。并且,搜索引擎为了提高用户搜索效率和搜索结果的质量,很少会将带有大量无效链接的站点优先展示,导致网站被搜索引擎降权。因此,需要将网站里的各种无效链接进行退场处理,来维护网站性能、保持网站内容完整。
[0003]目前,对链接进行退场时,是以串行的方式对链接依次进行无效检测,再对检测为无效链接的链接进行退场处理。
[0004]但是,目前这种链接退场方式,退场效率低下。

技术实现思路

[0005]本公开提供了一种链接退场方法、装置、设备及存储介质,能够提高链接退场效率。
[0006]根据本公开的第一方面,提供了一种链接退场方法,包括:
[0007]获取待检测链接;按照预设类别对待检测链接进行分类,得到每种预设类别对应的待检测链接,预设类别是根据待检测链接所在的数据库以及待检测链接对应的页面类型划分的;并行检测每种预设类别对应的待检测链接,得到每种预设类别对应的第一无效链接;对每种预设类别对应的第一无效链接进行退场。
[0008]根据本公开的第二方面,提供了一种链接退场装置,该装置包括:划分模块和处理模块。
[0009]划分模块,用于获取待检测链接;按照预设类别对待检测链接进行分类,得到每种预设类别对应的待检测链接,预设类别是根据待检测链接所在的数据库以及待检测链接对应的页面类型划分的。
[0010]处理模块,用于并行检测每种预设类别对应的待检测链接,得到每种预设类别对应的第一无效链接;对每种预设类别对应的第一无效链接进行退场。
[0011]根据本公开的第三方面,提供了一种电子设备,包括:至少一个处理器;以及与至少一个处理器通信连接的存储器;其中,存储器存储有可被至少一个处理器执行的指令,指令被至少一个处理器执行,以使至少一个处理器能够执行如第一方面的方法。
[0012]根据本公开的第四方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,计算机指令用于使计算机执行根据第一方面的方法。
[0013]根据本公开的第五方面,提供了一种计算机程序产品,包括计算机程序,计算机程序在被处理器执行时实现根据第一方面的方法。
[0014]应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0015]附图用于更好地理解本方案,不构成对本公开的限定。其中:
[0016]图1为本公开实施例提供的链接退场方法的流程示意图;
[0017]图2为本公开实施例提供的图1中S101的一种流程示意图;
[0018]图3为本公开实施例提供的图1中S104的一种流程示意图;
[0019]图4为本公开实施例提供的链接退场方法的另一种流程示意图;
[0020]图5为本公开实施例提供的链接退场方法的又一种流程示意图;
[0021]图6为本公开实施例提供的一种链接退场系统的示意图;
[0022]图7为本公开实施例提供的链接退场装置的组成示意图;
[0023]图8为本公开实施例提供的电子设备的组成示意图。
具体实施方式
[0024]以下结合附图对本公开的示范性实施例做出说明,其中包括本公开实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本公开的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
[0025]应当理解,在本公开各实施例中,字符“/”一般表示前后关联对象是一种“或”的关系。术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。
[0026]无效链接是指Web网站中处于路径不可达状态的Web链接,它是导致网站性能下降的重要原因之一。并且,搜索引擎为了提高用户搜索效率和搜索结果的质量,很少会将带有大量无效链接的站点优先展示,导致网站被搜索引擎降权。因此,需要将网站里的各种无效链接进行退场处理,来维护网站性能、保持网站内容完整。
[0027]无效链接按类型可以包括协议无效链接和内容无效链接。协议无效链接可以包括TCP协议状态或HTTP协议状态明确表示的无效链接,例如出现404、403、503等状态的无效链接。内容无效链接可以包括服务器的返回状态是正常的,但链接内容已经变更为不存在、已删除或需要权限等与原内容无关的内容的链接。
[0028]目前,对链接进行退场时,是以串行的方式对链接依次进行无效检测,再对检测为无效链接的链接进行退场处理。
[0029]例如,对10个链接进行退场时,需要先对第一个链接进行无效检测,再对第二个链接进行无效检测,直至10个链接均进行了无效检测,然后将10个链接中检测为无效链接的链接进行退场。
[0030]但是,目前这种链接退场方式,退场效率低下。
[0031]由于只能以串行的方式依次对链接进行无效检测,因此检测无效链接的效率不高,进而导致链接退场的效率低下。
[0032]在此
技术介绍
下,本公开提供了一种链接退场方法,可以提高链接退场效率。
[0033]本公开实施例提供的链接退场方法的执行主体可以是计算机或服务器,或者还可以是其他具有数据处理能力的电子设备;或者,该方法的执行主体也可以是上述电子设备中的处理器(例如中央处理器(central processing unit,CPU));再或者,该方法的执行主体还可以是上述电子设备中安装的能够实现该方法的功能的应用程序(application,APP);又或者,该方法的执行主体又可以是上述电子设备中具有该方法的功能的功能模块或单元等。在此对该方法的执行主体不作限制。
[0034]下面结合附图对该链接退场方法进行示例性说明。
[0035]图1为本公开实施例提供的链接退场方法的流程示意图。如图1所示,该方法可以包括:
[0036]S101、获取待检测链接。
[0037]示例性地,待检测链接可以为数据库中的所有链接,也可以是人为指定的各数据库中的部分链接或任一数据库中的全部或部分链接。
[0038]示例性地,可以根据现有的硬件资源的处理待检测链接能力,按照“窗口滑动”的方式,得到现有硬件资源每天能够处理的待检测链接,以保证现有硬件资源处理待检测链接的稳定性。
[0039]S102、按照预设类别对待检测链接进行分类,得到每种预设类别对应的待检测链接。
[0040]其中,预设类别是根据待检测所在的数据库以及本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种链接退场方法,所述方法包括:获取待检测链接;按照预设类别对所述待检测链接进行分类,得到每种预设类别对应的待检测链接,所述预设类别是根据所述待检测链接所在的数据库以及所述待检测链接对应的页面类型划分的;并行检测每种所述预设类别对应的待检测链接,得到每种所述预设类别对应的第一无效链接;对每种所述预设类别对应的第一无效链接进行退场。2.根据权利要求1所述的方法,所述获取待检测链接,包括:获取目标链接集合,所述目标链接集合包括至少一条目标链接;根据预设无效链接集合,确定所述目标链接集合中的无效目标链接,所述预设无效链接集合包括至少一条无效链接;确定所述目标链接集合中除所述无效目标链接之外的目标链接为所述待检测链接;所述方法还包括:对所述无效目标链接进行退场。3.根据权利要求1或2所述的方法,所述方法还包括:根据每种所述预设类别对应的第一无效链接,对所述预设无效链接集合进行更新。4.根据权利要求1

3任一项所述的方法,所述对每种所述预设类别对应的第一无效链接进行退场,包括:获取每种所述预设类别对应的第一无效链接的置信度;根据每种所述预设类别对应的第一无效链接的置信度,确定置信度满足要求的第一无效链接为目标无效链接;对所述目标无效链接进行退场。5.根据权利要求2所述的方法,在所述获取待检测链接之后,所述方法还包括:获取所述待检测链接的访问日志;根据访问日志,得到每个所述待检测链接每次被访问时的状态,所述状态包括有效状态和无效状态;确定最近一次被访问时的状态为无效状态的待检测链接为第二无效链接;对所述第二无效链接进行退场。6.根据权利要求5所述的方法,所述对所述第二无效链接进行退场,包括:在所述第二无效链接的上一次被访问的状态为有效状态或状态为空时,对所述第二无效链接进行退场。7.根据权利要求5或6所述的方法,所述方法还包括:根据所述第二无效链接,对所述预设无效链接集合进行更新。8.根据权利要求1

7任一项所述的方法,所述方法还包括:获取每个所述待检测链接被确定为无效链接的时刻与被完成退场的时刻之间的时间间隔;当任一所述待检测链接对应的所述时间间隔大于预设时长时,输出告警信息。9.一种链接退场装置,所述装置包括:
划分模块,用于获取待检测链接;按照预设类别对所述待检测链接进行分类,得到每种预设类别对应的待检测链接,所述预设类别是根据所述待检测链接所在的数据库以及所述待检测链接对应的页面类型划分的;处理模块,用于并行检测每种所述预设类别对应的待检测链接,得到每种所述预设类别对应...

【专利技术属性】
技术研发人员:常德宝刘晓庆李书伟
申请(专利权)人:百度在线网络技术北京有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1