request应用之爬取亚马逊商品页面

尝试使用r=request.get(url) 查看 r.status_code,返回结果是503， r.encoding发现返回的是ISO-8859-1， r.encoding=r.apparent_encoding 返回结果： 说明亚马逊拒绝了访问， 许多网站对于爬虫有限制，途径主要有两种，一种是通过robots协议告知那些可以访问，那些不可以访问；一种是通过网站访问的http的头来查看访问是不

>>阅读原文<<