阅读背景:

爬虫知识点(scrapy_redis分布式爬虫系统)

来源:互联网 

Scrapy 和 scrapy-redis的区别

Scrapy 是一个通用的爬虫框架,但是不支持分布式,Scrapy-redis是为了更方便地实现Scrapy分布式爬取,而提供了一些以redis为基础的组件(仅有组件)。Scrapy 是一个通用的爬虫框架,但是




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: