下载一种通用的网络爬虫模型实现方法及系统的技术资料

文档序号:16644927

温馨提示:您尚未登录,请点 登陆 后下载,如果您还没有账户请点 注册 ,登陆完成后,请刷新本页查看技术详细信息。

本申请公开了一种通用的网络爬虫模型实现方法及系统;其中的方法主要包括:获取待处理的爬虫爬取任务;以统一资源定位符URL为爬取任务执行粒度将所述爬虫爬取任务转化为多个爬虫爬取任务对象;由针对所述多个爬虫爬取任务对象而动态创建的至少一个网络爬虫...
该专利属于湖北省楚天云有限公司所有,仅供学习研究参考,未经过湖北省楚天云有限公司授权不得商用。

详细技术文档下载地址

温馨提示:您尚未登录,请点 登陆 后下载,如果您还没有账户请点 注册 ,登陆完成后,请刷新本页查看技术详细信息。