scrapy中spider和crawlspider的区别

spider和crawlspider都是用来实现数据解析的爬虫模块,但是还是有很大区别的. 原理来说都可以达到目的,但是应用情况嫩实现数量级的区别. 建立方式: scrapy genspider 爬虫名 指定域 scrapy genspider -t crawl 爬虫名 指定域 spider有parse函数 crawl spider没有parse函数 crawl spider生成了一个rules,

>>阅读原文<<