python爬虫笔记（六）——应对反爬策略

如下总结的全是单机爬取的应对反爬策略html   一、设置爬取速度，因为爬虫发送请求的速度比较快，会对服务器形成必定的影响，尽量控制爬取速度，作到文明爬取python 二、重启路由器。并非指物理上的插拔路由器，而是指模拟路由器重启时发送的表单。登录本身的路由器，通常路由器会提供重启路由器的选项，根据路由器的重启特色进行模拟，若是以为模拟请求麻烦，那就经过selenium+chromedriver直

>>阅读原文<<