爬取360图片

这次我们爬取的网址是 http://image.so.com/z?ch=photography 随着滚轮下滑,图片一个个加载出来,所以我们推测这是Ajax形式 我们在开发工具里选中XHR 观察请求 可知这个url的sn参数是以30倍数增长,我们可以利用这个特性进行url的构造 其次我们图片的具体信息都在list里面 下面我们先新建scrapy项目 在你想创建项目的路径里打开powershell s
相关文章
相关标签/搜索