【零基础学爬虫】scrapy框架的基本使用

回顾 scrapy是一个非常强大的异步爬虫框架,组件丰富,我们只需要关注爬虫的逻辑即可。本文通过一个scrapy项目实战,来熟悉scrapy的使用 站点分析 目标站点:scrapy官方提供的抓取网站,主要是名人名言、作者标签之类的信息 网页结构非常简单 翻页url: http://quotes.toscrape.com/page/5/ 该网站没有任何的反爬虫措施,结果也很简单 流程框架 实现 进入
相关文章
相关标签/搜索