1. 问题背景
在应用urllib2 module抓取web数据时,如果愿望应用如何request header,减少传输时数据量。返回的数据,是经过gzip紧缩的。直接依照 content.decode(“utf8”), 解码会涌现异常,并且也没法检测网页数据的实际编码类型。在应用urllib2 module抓取web数据时,如果愿望应用如何reques
在应用urllib2 module抓取web数据时,如果愿望应用如何request header,减少传输时数据量。返回的数据,是经过gzip紧缩的。直接依照 content.decode(“utf8”), 解码会涌现异常,并且也没法检测网页数据的实际编码类型。在应用urllib2 module抓取web数据时,如果愿望应用如何reques