Scrapy学习——CrawlSpider详解

  首先，说是详解，其实也并非多么深刻，只是本身的一些学习笔记。其次，本文适合一边翻源码，一边阅读。python   从CrawlSpider的源码（crawl.py）中咱们能够看到，CrawlSpider是继承Spider类的。在scrapy的官方文档中对Spider的描述以下：web 以初始的URL初始化Request，并设置回调函数。 当该request下载完毕并返回时，将生成respons

>>阅读原文<<