下载一种主机负荷智能感知的定向爬虫方法及系统的技术资料

文档序号:24091759

温馨提示:您尚未登录,请点 登陆 后下载,如果您还没有账户请点 注册 ,登陆完成后,请刷新本页查看技术详细信息。

本发明公开了一种主机负荷智能感知的定向爬虫方法及系统,方法包括:(1)打开浏览器并定位到待爬取站点,通过模拟浏览器行为实现页面的跳转以及读取;(2)根据设置的检索条件自动生成需要爬取页面的URL集合;(3)根据爬虫任务的重要性和紧迫程度对U...
该专利属于东南大学所有,仅供学习研究参考,未经过东南大学授权不得商用。

详细技术文档下载地址

温馨提示:您尚未登录,请点 登陆 后下载,如果您还没有账户请点 注册 ,登陆完成后,请刷新本页查看技术详细信息。