一个简单的ip池的搭建

在爬虫的时候老是会遇到跑的太频繁而致使ip被封号的问题，因此就想着作一个简单的ip池去规避这种反爬取的手段，固然我写的ip池功能稍微简单一点，可是也能知足在爬取时遇到的封禁ip的问题。整个流程就是先用get_ip()函数从网上爬取免费的代理ip地址，固然对于这些代理的ip的能使用率是比较低的，咱们用redis数据库的zset对其进行存储，zset有序集合比通常的集合多了一个分数的字段，咱们能够在存

>>阅读原文<<