【scrapy】学习Scrapy入门

Scrapy介绍 Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架。 能够应用在包括数据挖掘，信息处理或存储历史数据等一系列的程序中。 所谓网络爬虫，就是一个在网上处处或定向抓取数据的程序，固然，这种说法不够专业，更专业的描述就是，抓取特定网站网页的HTML数据。抓取网页的通常方法是，定义一个入口页面，而后通常一个页面会有其余页面的URL，因而从当前页面获取到这些URL加入到爬虫

>>阅读原文<<