爬虫进阶之Scrapy框架原理及实现

Scrapy框架 1. Scrapy总体架构 2. Scrapy运行流程 3. 安装 4. 基本使用 4.1 建立项目 4.2 编写爬虫 4.3 运行爬虫 5. HtmlXPathSelector 选择器 6. 递归访问爬取网页 7. 获取Cookies 8. Items格式化处理 实例之爬取伯乐在线全部文章 Scrapy框架 Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架。其

>>阅读原文<<