!-- flowchart 箭头图标 勿删 --
爬虫过程中会由于各种原因导致数据重复以及确实，如网络中断，网络质量差，ip限制等等，因而进行数据清洗十分必要。爬虫过程中会由
阅读背景：
列表数据清洗遇到问题的记录——set用法
来源：互联网
分享到：
