一般比价小型的爬虫需求，我是直接使用requests库 + bs4就解决了，再麻烦点就使用selenium解决js的异步 加载问题。相对比较大型的需求才使用框架，主要是便于管理以及扩展等。一般比价小型的爬虫需求，我是直接使用requests库 + bs4就解决了，再
阅读背景：
十个Python爬虫武器库示例，十个爬虫框架，十种实现爬虫的方法！
来源：互联网
分享到：
