环境：
这回要用分布式：我使用两台电脑，一台win10 系统，用来爬信息，一台ubuntu 16.04用来爬url，数据库redis，MongoDB都用的ubuntu上的，没有两台电脑在一个电脑上开两个爬虫也是一样的。这回要用分布式：我使用两台电脑，一台win10 系统，用来爬信息，一台u
阅读背景：
小项目-数据爬取篇：scrapy-redis，手机网页，房天下租房信息，分布式，代理ip
来源：互联网
分享到：
