阅读背景:

去哪儿网机票爬虫

来源:互联网 

  最近公司有一个新的需求,就是需要爬某一天飞机票的数据,先让我爬携程,去哪儿网的数据,携程的话,还是比较简单的,但是在去哪儿网就遇到问题了,刚开始的时候我是用requests模块来爬去哪儿网,在请求的头信息,有一些随机值,每次请求都不一样,即使你使用上一次请求的随机值,将会给你返回假数据。我自己给它生成一些随机字符串去请求,但依然返回假数据。最后没有办法,我只能使用selenium大法了。  最近公司有一个新的需求,就是需要爬某一天飞机票的数据,先让我爬携程,去哪儿网的数据,携程的话,还




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: