python爬虫设置代理ip

爬大量数据时候，若是一直使用一个ip，会被封禁。 所以要设置ip,在此我整理了一份ip代码，原理是先获取西刺代理的ip，而后进行筛选。每次返回一个。 供你们以及我的使用。 代码以下：python # IP地址取自国内髙匿代理IP网站：http://www.xicidaili.com/nn/ # 仅仅爬取首页IP地址就足够通常使用 from bs4 import BeautifulSoup impo

>>阅读原文<<