Ubuntu16.04下Scrapy环境的搭建

一、Scrapy简介与部署环境            Scrapy是一个为了爬取网站数据，提取结构性数据而编写的第三方爬虫框架。 可以应用在包括数据挖掘，信息处理或存储历史数据等一系列的程序中。        最初是为了页面抓取 (更确切来说, 网络抓取 )所设计的， 也可以应用在获取API所返回的数据(例如 Amazon Associates Web Services ) 或者通用的网络爬虫。S

>>阅读原文<<