python爬虫(五):实战 【4. 爬亚马逊】

目标:在亚马逊网站搜索商品,爬取前10页的商品(名字和价格) 第一步:访问网站,隐藏爬虫 亚马逊对爬虫限制比较严格,修改headers、cookies、代理ip 获取cookie:f12在console输入document.cookie() 注意:cookies格式为字典,{'a':'1','b':'2','c':'3'} 最好自己手动替换,我用记事本替换=为:就出错了,因为cookies内部也有
相关文章
相关标签/搜索