阅读背景:

scrapy在重复爬取的时候删除掉之前爬的旧数据,在爬虫结束的时候收集统计信息

来源:互联网 

问题:想在启动scrapy后重复爬取某一天的数据,但是爬取之前需要删除掉之前的旧数据,在哪里实现删除呢?问题:想在启动scrapy后重复爬取某一天的数据,但是爬取之前需要删除掉之前的旧数据,在哪里实现




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: