learning scrapy笔记(三)

UR2M–基础抓取过程 每个网站都是不同的,对每个网站进行研究是不可避免的,尤其是遇到一些生僻的问题时,还需要去Scrapy的邮件列表咨询。因此我们需要熟悉Scrapy整个过程。Scrapy的基本过程,可以写成缩略语UR2M,见下图。 The URL 一切都是从url开始。你需要目标网站的URL。 请求和相应 我们在输出日志中,Scrapy自动为我们做了一些工作。我们输入一个地址,Scrapy做了
相关文章
相关标签/搜索