阅读背景:

WebCollector下载整站页面(JAVA网络爬虫)

来源:互联网 

    很多业务需要下载整站页面(有时为多个站点),将页面按照网站拓扑结构存放。

    下面给出用JAVA爬虫WebCollector(2.09版本以上)爬取整站网页并按照网页拓扑结构存储到本地的代码。   




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: