Python爬虫爬取伯乐在线

一.环境搭建 1.创建环境 执行pip install scrapy安装scrapy 使用scrapy startproject ArticleSpider创建scrapy项目 使用pycharm导入创建的scrapy项目 2.项目结构 scrapy.cfg：scrapy配置文件 settings.py：配置代码文件信息 pipelines.py：和数据存储相关的文件 middlewares.py

>>阅读原文<<