Python爬虫：爬取免费代理ip

之前写的几个爬虫都只能爬取到少量的信息，这是由于一个ip频繁地访问网站，会被认定为非正常的爬虫从而被屏蔽，这时候就需要使用代理ip来访问网站了，具体方法就是在发送request时添加一个proxy参数。代理ip有收费的也有免费的，免费的通常不太稳定，或者根本无法使用。我们的目标是在https://www.xicidaili.com/nn/页面爬取免费代理ip，然后验证代理ip可否使用，最后把相关信

>>阅读原文<<