关于加快python爬虫获取页面的方法

1、使用异步i/o库Twisted,这个方法是现在速度较快的获得html文档的方法，在使用的时候一定要注意对于速度的控制。不能对服务器造成过大的负担，否则会被服务器封ip。1、使用异步i/o库Twisted,这个方法是现在速度较快的获得html文档的方法，在使用的时