python3（requests）使用代理ip

之前记录的维护一个ip池html 当须要采集大量数据时，或者有的网站对访问速度特别严格的时候，有的网站就采起封ip，这样就须要使用代理ip。就像马蜂窝同样，，自从被曝数据造假以后，就很差爬了，python使用代理ip的小demo为： 其中，若是你爬的为https://www.xxxxx这类那么proxies里面的https内容有效。若是你爬的是http://biggsai.com这种，那么prox

>>阅读原文<<