爬虫IP被封的处理方法

在数据爬虫的工作中，我们不可避免的会遭遇反爬封禁，所以会有爬虫的攻防，在攻和守之间两股力量不断的抗衡。 接下来就讲讲在数据抓取或爬虫时ip被限制的几种解决方案问题： 解决方案一： 建议一定要使用代理IP；在有外网IP的机器上，部署爬虫代理服务器；使用轮训替换代理服务器来访问想要采集的网址。这样的话，你的程序逻辑变化小，只要代理功能就可以，而且根据对方网址屏蔽标准不同，你只需要添加不同的代理就可以了

>>阅读原文<<