爬虫代理

前言 花了几天时间写了一个比较完整的爬虫代理模块，基本上实现了一个比较完整的代理系统。php 有以下几大模块：python ip的获取模块 检验及删除更新 requests循环请求 ip的获取 ip来源：http://www.xicidaili.com/wt/ 经过遍历西刺代理中的四个页面获取ip，而后对ip有效性进行检验，将有效的ip写入文件。这里须要注意一下，西刺代理有效的ip通常都在前面，后

>>阅读原文<<