超简单的付费代理池监控清洗器，自动维护ip池

时间 2021-07-13

原文原文链接

开发一个超简单的付费代理池监控维护器爬虫经常会用到代理ip，其中有很多收费ip，但是如何在scrapy中，高效使用这些ip是一个比较麻烦的事情，在这里基于芝麻代理ip做一个代理池监控器，首先整理我们的需求整理需求芝麻付费代理取ip是不要钱，只有使用才收费，针对这个特点，可以让我们代理池24小时始终保持指定数量的ip即使没有使用需要监控ip是否过期，如果已经过期就从池中删除监控访问目标网

>>阅读原文<<

1. python3使用付费代理（蘑菇代理）和ip池的维护
2. 利用 Flask+Redis 维护 IP 代理池
3. 如何维护一个1000 IP的免费代理池
4. 自建免费的代理ip池
5. Python：Flask + Redis 维护代理池
6. Flask+Redis维护代理池
7. 免费代理IP池
8. C#——作一个简单代理IP池
9. 付费代理池的使用
10. UA池和代理池（IP)
更多相关文章...
• hibernate.cfg.xml和C3P0连接池的配置 - Hibernate教程
• Spring JDK动态代理（附带实例） - Spring教程
• Docker 清理命令
• Docker容器实战(七) - 容器眼光下的文件系统