Scrapy笔记二:Scrapy的工作流程

文章目录 Scrapy的工作流程 调度器Scheduler 下载器Downloader 爬虫Spider 引擎Scrapy Engine 中间件 下载中间件Downloader Middlewares 爬虫中间件Spider Middlewares 数据队列Pipeline Scrapy的工作流程 调度器Scheduler 队列,存放引擎(Scrapy Engine)发过来的requests请求
相关文章
相关标签/搜索