直接上代码
首先说明下，为什么要加入头部？
因为爬取时最正式的做法是仿照http的过程，在用爬虫获取网页的时候，加入头部，伪装成浏览器。Http 其实就是 请求/响应模式，永远都是 客户端向服务端发送请求，然后服务端再返回响应。因为爬取时最正式的做法是仿照http的过程
阅读背景：
第一个网页爬虫(python3版本)
来源：互联网
分享到：
