scrapy爬虫框架

1.scrapy安装 安装还是比较简单的，可以直接在环境中pip install scrapy 等待执行完成，当然scrapy框架也会对其他的库有依赖，Scrapy 使用了 Twisted异步网络库来处理网络通讯。所以一定要安装Twisted库https://twistedmatrix.com/trac/wiki/Downloads 如图完成本地安装，可能还需要一些其他的，可以自己自行根据提示自己

>>阅读原文<<