- 爬虫时总是会遇到被封禁的问题,推荐所以匿名代理
- 有很多网站提供匿名代理,可以抓取下来,自己维护一套库,维护成本并不是太多。
- 注意:需要及时检查代理是否有效,无效则及时清理掉。
西祠:http://www.xicidaili.com/nn/
逼格:http://www.bigdaili.com/dailiip/1/1.html
快代理:http://www.kuaidaili.com/free/inha/
云代理:http://www.ip3366.net/free/
66免费代理网:http://www.66ip.cn/pt.html
西祠带来:http://api.xicidaili.com/free2016.txt
####更新于2017.01.22