scrapy 中的CrawlSpider(三）

Scrapy框架中分两类爬虫，Spider类和CrawlSpider类。 创建CrawlSpider模板： scrapy genspider -t crawl spider名称 www.xxxx.com 具体参数： callback： 从link_extractor中每获取到链接时，参数所指定的值作为回调函数，该回调函数接受一个response作为其第一个参数。 注意：当编写爬虫规则时，避免使用p

>>阅读原文<<