scrapy之原理

最近小二的公司，由于要获取数据但苦于没有爬虫，于是小二再次开始半路出家，经过小二的调研，最后决定用scraly来进行实现。虽然scrapy的中文资料不少，但成体系的很少，小二就在此总结一下，以为后来者提供方便 scrapy原理  Scrapy Engine 引擎负责控制数据流在系统中所有组件中流动，并在相应动作发生时触发事件。 详细内容查看下面的数据流(Data Flow)部分。

>>阅读原文<<