python爬虫系列12--Scrapy应用

1、Scrapy架构                                      2、每个Spider必须继承自scrapy.Spider类，scrapy.Spider没有什么特殊的功能，仅仅提供了start_requests()的默认实现，读取并请求Spider属性中的start_urls，并根据返回的response调用Spider的parse方法。 Scrapy除了提供Spid

>>阅读原文<<