Scrapy框架（六）——Middleware

Middleware其实是一个轻量级、较底层的钩子框架，用来全局的去处理相对应的内容。Scrapy中主要有两种Middleware，一种是Downloader Middleware，一种是Spider Middleware。 下载中间件 下载中间件是scrapy提供用于用于在爬虫过程中可修改Request和Response，用于扩展scrapy的功能；Downloader Middleware处于

>>阅读原文<<