Scrapy入门

Scrapy入门  Scrapy是Python开发的一个快速、高层次的屏幕抓取和web抓取框架,用于抓取web站点并从页面中提取结构化的数据,任何人都可以根据需求方便的修改。Scrapy用途广泛,可以用于数据挖掘、监测和自动化测试。 工作原理 (5+2) 引擎(Scrapy Engine)(已有实现)  用来处理整个系统的数据流, 触发事务(框架核心) 调度器(Scheduler)(已有实现)  
相关文章
相关标签/搜索