阅读背景:

利用scrapy-splash爬取JS生成的动态页面

来源:互联网 

目前,为了加速页面的加载速度,页面的很多部分都是用JS生成的,而对于用scrapy爬虫来说就是一个很大的问题,因为scrapy没有JS engine,所以爬取的都是静态页面,对于JS生成的动态页面都无法获得。目前,为了加速页面的加载速度,页面的很多部分都是用JS生成的,而对于用scrapy爬虫来说就是一个很




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: