scrapy爬取京东商城某一类商品的信息和评论（一）

刚写完京东爬虫，趁着记忆还深入，写点总结吧。python 1、前提git 默认已用scrapy爬取过网站，有爬虫基础，有爬虫环境github 2、以爬取电子烟为例chrome 一、任务一：爬取商品信息数据库 在搜索框里面直接搜索电子烟，搜出来的界面，你会发现它是动态加载的。即一开始源代码里面只能看到30条商品的信息，随着你的下拉，另外30条才会加载出来。所以爬取起来比较麻烦。后来发现，从京东左边的

>>阅读原文<<