什么是爬虫?
从逻辑角度讲，爬虫对应一个树。树枝是网页，树叶是感兴趣的信息。
当我们从一个URL出发查找感兴趣的信息时，当前URL返回的内容可能包含我们感兴趣的信息，也可能包含另一个可能包含我们感兴趣的信息的URL。一个爬虫对应一次信息搜索，信息搜索过程会建立起一棵树。当我们
阅读背景：
Python爬虫框架Scrapy 学习笔记 8----Spider
来源：互联网
分享到：
