下载用于抓取网络商城中网页的爬虫算法的技术资料

文档序号:8453124

温馨提示:您尚未登录,请点 登陆 后下载,如果您还没有账户请点 注册 ,登陆完成后,请刷新本页查看技术详细信息。

本发明涉及一种用于抓取网络商城中网页的爬虫算法,该算法根据初始链接采集网络商城上的页面,将页面下的种子集添加到url队列中;根据初始链接下载页面,并将新链接添加到list队列中,且对页面进行相关度的计算。根据页面的深度,以及页面与主题的相关...
该专利属于福建师范大学所有,仅供学习研究参考,未经过福建师范大学授权不得商用。

详细技术文档下载地址

温馨提示:您尚未登录,请点 登陆 后下载,如果您还没有账户请点 注册 ,登陆完成后,请刷新本页查看技术详细信息。