延时爬取解决503错误

1. 503错误 今天爬了一个代理网站,请求状态的状态码是503,且具体如下图,可以看到第一次请求的状态码是200,正常;可第二次就是503错误码: 然后上网搜了503错误码的意义,如下: 经过分析,确定是自己爬取太快,因此设置了每隔2s进行一次爬取,更改如下:
相关文章
相关标签/搜索