scrapy爬取优信二手车

学习scrapy须要必定的小项目练手,最近在练习使用scrapy来爬取瓜子二手车的信息,可是不知道为何总是出现203错误,cookie,robot协议,请求头什么的都搞了,可是仍是不行.最后只能退而求其次,来爬取优信二手车的信息了 经过观察优信二手车的信息,发现信息与瓜子二手车的信息差很少一致,关键是还不反爬(没有使用IP代理,也没有封个人IP),固然仍是须要设置一下延时的,若是过快会出现验证码

>>阅读原文<<