一种网站扫描方法、装置、电子设备及存储介质制造方法及图纸

技术编号:41515762 阅读:19 留言:0更新日期:2024-05-30 14:52
本申请提供了一种网站扫描方法、装置、电子设备及存储介质,根据所接收的网站扫描任务得到扫描目标,对所述扫描目标对应的网站并行执行爬虫任务,并将得到的爬虫结果实时存储至第一缓存池中,当监测到所述第一缓存池中存在爬虫结果时,根据所述第一缓存池中的爬虫结果,对所述第一缓存池中的爬虫结果对应的网站并行执行漏洞检测任务,得到第一漏洞检测结果,通过将爬虫与漏洞检测解耦并行,实现了提升网站扫描效率和网站扫描流程的可扩展性。

【技术实现步骤摘要】

本申请涉及计算机,尤其涉及一种网站扫描方法、装置、电子设备及存储介质


技术介绍

1、随着互联网技术的飞速发展,互联网中运行的网站数量也达到了一个新的高度。而批量化建立的网站,因其源码大量采用了开源的框架或工具,且负责开发维护的人员水平良莠不蒂,存在可被黑客利用的漏洞可能性也非常大。

2、目前,现有的网站扫描工具几乎都是按顺序执行网站扫描任务,其内部架构中爬虫与漏洞扫描脚本往往是强耦合的,也即“先爬后扫”。因此,在进行大批量的网站扫描工作时,如果某一网站访问缓慢,则其他网站的扫描任务只能等待,网站扫描效率低,且由于网站扫描流程过于耦合,扩展新的插件很困难。


技术实现思路

1、有鉴于此,本申请提供一种网站扫描方法、装置、电子设备及存储介质,以实现提升网站扫描效率和网站扫描流程的可扩展性。

2、在本申请的第一方面,提供一种网站扫描方法,包括:

3、根据所接收的网站扫描任务得到扫描目标;

4、对所述扫描目标对应的网站并行执行爬虫任务,并将得到的爬虫结果实时存储至第一缓本文档来自技高网...

【技术保护点】

1.一种网站扫描方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,该方法还包括:

3.根据权利要求1所述的方法,其特征在于,根据所接收的网站扫描任务得到扫描目标,包括:

4.根据权利要求3所述的方法,其特征在于,在根据预设拆分规则对所述URL列表进行拆分处理得到目标URL之前,该方法还包括:

5.根据权利要求1所述的方法,其特征在于,所述对所述扫描目标对应的网站并行执行爬虫任务,并将得到的爬虫结果实时存储至第一缓存池中,包括:

6.一种网站扫描装置,其特征在于,包括:

7.根据权利要求6所述的装置,...

【技术特征摘要】

1.一种网站扫描方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,该方法还包括:

3.根据权利要求1所述的方法,其特征在于,根据所接收的网站扫描任务得到扫描目标,包括:

4.根据权利要求3所述的方法,其特征在于,在根据预设拆分规则对所述url列表进行拆分处理得到目标url之前,该方法还包括:

5.根据权利要求1所述的方法,其特征在于,所述对所述扫描目标对应的网站并行执行爬虫任务,并将得到的爬虫结果实时存储至第一缓存池中,包括:

6.一种网站扫描装置,其特征在于,包括:

...

【专利技术属性】
技术研发人员:杨圣华曹浪李群
申请(专利权)人:杭州迪普科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1