Python爬虫—Scrapy框架

1、为何要使用Scrapy？ 它更容易构建和大规模的抓取项目 它内置的机制被称为选择器，用于从网站（网页）上提取数据 它异步处理请求，速度十分快 它可使用自动调节机制自动调整爬行速度 确保开发人员可访问性 2、Scrapy的特色 Scrapy是一个开源和无偿使用的网络爬虫框架 Scrapy生成格式导出如：JSON，CSV和XML Scrapy内置支持从源代码，使用XPath或CSS表达式的选择器来

>>阅读原文<<