python爬虫框架之Scrapy之分布式爬取读书网

首先建立项目css 进入项目文件夹下用cmdhtml scrapy startproject DuShu 打开项目建立appredis scrapy genspider -t crawl dushu dushu.com 修改settings.py数据库 USER_AGENT = 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.3
相关文章
相关标签/搜索