python3 爬虫总结之代理请求

1、网页请求、数据请求 urllib.request 请求头中带上headers，模拟浏览器访问网页或者数据请求。 如果在Request中在加入 proxies={'http': IP:Port},可以通过动态IP代理高匿访问资源。通过设置IP端口池，动态随机获取高匿IP端口。推荐西刺代理https://www.xicidaili.com/nn/。 Requests 个人还是比较喜欢Request

>>阅读原文<<