scrapy爬虫框架之理解篇

提问： 为什么使用scrapy框架来写爬虫 ？            在python爬虫中：requests  +  selenium  可以解决目前90%的爬虫需求，难道scrapy 是解决剩下的10%的吗？显然不是。scrapy框架是为了让我们的爬虫更强大、更高效。接下来我们一起学习一下它吧。     1.scrapy 的基础概念： 　　scrapy 是一个为了爬取网站数据，提取结构性数据而编

>>阅读原文<<