当当商品信息爬虫（基于Scrapy框架）

1，首先，基于cmd创建爬虫项目，命令为：scrapy startproject dangdang 2，创建一个以基础爬虫为模板的爬虫文件，命令为：scrapy genspider -t dd dangdang.com 如下图所示，再spiders中生成了dd.py文件！ 3，我们爬取的信息有，商品标题，商品出售店铺，商品链接，商品评论数，商品价格 如下所示：     4，在配置文件setting

>>阅读原文<<