单linux服务器同时拨多条ADSL和挂多个固定公网ip经过squid实现代理池方案

1、背景：php 大数据时代，谁拥有数据谁才能有将来，不少互联网公司自己并不产生数据，怎么办？抓数据，对抓数据，因此在目前巨大的网络流量中有至关一部分是爬虫流量，如搜索引擎蜘蛛、抓取电商网站的商品数据的爬虫等。如本文开始所述，数据即将来，有数据的凭什么让你抓，因此会对用户访问作一些访问频次限制，超过设定就拉黑（如封ip、封特定user agent、封url等），但这也只是作频次限制而已，并无彻底封

>>阅读原文<<