Scrapy 爬取今日头条街拍图片

scrapy 爬取今日头条图片保存至本地 以前用 requests 爬取过今日头条街拍的图片，当时只是爬取每篇文章的缩略图，今天尝试用 scrapy 来大规模爬取街拍详细图片。html 分析页面 今日头条的内容是以 Ajax 加载而成的，咱们爬取须要的是的 json 数据而非 html。 如上图所示，咱们对爬取的 json 数据进行解析，便可获得文章标题，文章详细地址。web def parse(

>>阅读原文<<