一、为何要设置User Agent
有一些网站不喜欢被爬虫程序访问，所以会检测连接对象，如果是爬虫程序，也就是非人点击访问，它就会不让你继续访问，所以为了要让程序可以正常运行，需要隐藏自己的爬虫程序的身份。此时，我们就可以通过设置User Agent的来达到隐藏身份的目的，User Agent的中文名为用户代理，简称UA。 有一些网站不喜欢被爬虫程序访问，所以会检测连接
阅读背景：
Python3-使用User Agent和代理IP隐藏身份
来源：互联网
分享到：
