爬虫scrapy学习

一、scrapy框架抓取网站，分为四个步骤： 1）创建一个scrapy项目 2）定义提取的Item容器 3）编写spider爬虫，并提取Item 4）编写Item Pipeline 存储提取到的Item 二、具体思维导图解释（参考自https://www.cnblogs.com/kongzhagen/p/6549053.html） 各部分组件： 引擎(Scrapy) 用来处理整个系统的数据流, 触

>>阅读原文<<