地址：github.com/derekhe/Pro…html
介绍
在《爬虫实战：从数据到产品》一书中，我讲到了一个基于ProxyBroker的代理池。通过个人长时间的实践，这个代理池用起来很是的方便和稳定。git
基于ProxyBroker，增长了中国区域的代理资源。并引入了docker-compose，可以快速的方便的开始代理的抓取。github
用法
docker-compose up
复制代码
而后浏览器打开http://localhost:8080/proxy.json 便可得代理列表。每一个代理都通过类型的验证，代理资源会随着时间增加。每一个代理的有效期为一天时间。大概一天有1万左右的有效代理。docker
因为不少代理资源在中国没法访问的网站，部署在国内的服务器上会影响资源的获取，因此推荐将服务器部署到国外的服务器。服务器推荐使用DigitalOcean，个人多个服务器都在SFO2区域，很是的稳定。json