温馨提示:您尚未登录,请点 登陆 后下载,如果您还没有账户请点 注册 ,登陆完成后,请刷新本页查看技术详细信息。
本申请涉及爬虫任务相关技术领域,尤其涉及一种分布式爬虫任务的调度方法及系统。本申请提供的分布式爬虫任务的调度方法包括:获取用户自定义的爬虫任务;确认所述爬虫任务所需虚拟节点个数;获取各虚拟节点的状态;基于所述各虚拟节点的状态和所述爬虫任务所...该专利属于电子科技大学;成都精准云教育科技有限公司所有,仅供学习研究参考,未经过电子科技大学;成都精准云教育科技有限公司授权不得商用。
温馨提示:您尚未登录,请点 登陆 后下载,如果您还没有账户请点 注册 ,登陆完成后,请刷新本页查看技术详细信息。
本申请涉及爬虫任务相关技术领域,尤其涉及一种分布式爬虫任务的调度方法及系统。本申请提供的分布式爬虫任务的调度方法包括:获取用户自定义的爬虫任务;确认所述爬虫任务所需虚拟节点个数;获取各虚拟节点的状态;基于所述各虚拟节点的状态和所述爬虫任务所...