简介
大多数情况下我们通过urllib2等模块可以对单纯的html进行爬取分析,但是当我们遇到的页面是js渲染的,我们需要去分析一个一个后台的请求,这就太蛋疼了。若我们使用像浏览器一样的工具来处理js渲染的页面,然后再通过BeautifulSoup来处理那就很容易了。 大多数情况下我们通过urllib2等模块可以对单纯的html进行爬取分析,但是当我们遇到的页
大多数情况下我们通过urllib2等模块可以对单纯的html进行爬取分析,但是当我们遇到的页面是js渲染的,我们需要去分析一个一个后台的请求,这就太蛋疼了。若我们使用像浏览器一样的工具来处理js渲染的页面,然后再通过BeautifulSoup来处理那就很容易了。 大多数情况下我们通过urllib2等模块可以对单纯的html进行爬取分析,但是当我们遇到的页