python scrapy 爬虫

        今天没事浅谈一下爬虫，有一次项目中用到数据，就开始用python爬虫，爬到的数据直接插到数据库，项目能够直接从数据库查找数据，审核后，能够在前台展现，爬取的速度比较慢，后来又用java写了一个爬虫代码，速度也是很慢，最后决定用scrapy这个爬虫框架爬虫，不错，速度确实比以前速度快了一些。java         在用scrapy爬取数据前，须要安装python下redis，mon

>>阅读原文<<