scrapy 调试功能

　　在使用 scrapy 来爬取网页的时候，我们难免会使用到调试功能，下面介绍两种调试方法： 1.终端使用 scrapy shell exampleurl exampleurl 为你要爬取网站的 url 。 开启调试界面后终端显示如下（类似 IPython）： 接下来就可以在命令行中输入各种方法来获取网页内容查看实时效果了。如通过 response.css() 或 response.xpath()

>>阅读原文<<