Python网络爬虫与信息提取（8）—— scrapy框架基础知识

前言 Scrapy爬虫框架结构 爬虫框架是实现爬虫功能的一个软件结构和功能组件集合 爬虫框架是一个半成品，能够帮助用户实现专业的网络爬虫 约束了用户使用的模板 5+2结构 5表示的是SPIDERS、ENGINE、ITEM PIPELINES、DOWNLOADER、SCHEDULER这五个模块 2表示SPIDERS与ENGINE链接的中间键和ENGINE与DOWNLOADER链接的中间键 三条主要数

>>阅读原文<<