9.4 Scrapy的项目管道

这些组件最重要的思路就是 拦截，即过滤 item管道：作用一：入库 校验：一是可以在管道，但主要是在item定义字段校验 管道是什么 Item管道(Item Pipeline)： 主要负责处理有蜘蛛从网页中抽取的Item，主要任务是清洗、验证和存储数据。 当页面被蜘蛛解析后，将被发送到Item管道，并经过几个特定的次序处理数据。 每个Item管道的组件都是有一个简单的方法组成的Python类。 它

>>阅读原文<<