016：Scrapy使用中必须得会的问题

Scrapy 的优缺点? （1）优点：scrapy 是异步的 采取可读性更强的 xpath 代替正则强大的统计和 log 系统，同时在不同的 url 上爬行支持 shell 方式，方便独立调试写 middleware,方便写一些统一的过滤器，通过管道的方式存入数据库 （2）缺点：基于 python 的爬虫框架，扩展性比较差 基于 twisted 框架，运行中的 exception 是不会干掉 re

>>阅读原文<<