【Python爬虫学习】九、Scrapy爬虫框架

标 沿着1至8顺序理解其工作流程题 Scrapy爬虫框架结构5+2 Enging:（相当于发动机） 整个框架的核心，控制所有模块的数据流，任何模块与模块之间的数据流动都要经过Enging模块的调度 根据各个模块提供的事件进行触发 不需要用户修改 Downloader 根据用户提供的请求下载网页，功能只是获得一个请求，并向网络中提交请求，最终获得返回的相关内容 不需要用户修改 Scheduler 对

>>阅读原文<<