python爬虫设置代理ip池——方法（一）

"""html 在使用python爬虫的时候，常常会碰见所要爬取的网站采起了反爬取技术，高强度、高效率地爬取网页信息经常会给网站服务器带来巨大压力，因此同一个IP反复爬取同一个网页，就极可能被封，那如何解决呢？使用代理ip，设置代理ip池。python 如下介绍的免费获取代理ip池的方法：web 优势：服务器 1.免费app 缺点：dom 1.代理ip稳定性差须要常常更换函数 2.爬取后ip存在不

>>阅读原文<<