PySpider爬虫框架介绍与phantomjs的安装

pyspider的介绍 PySpider是一种爬虫框架，基于PyQuery实现的。 一个国人编写的强大的网络爬虫系统并带有强大的WebUI。采用Python语言编写，分布式架构，支持多种数据库后端，强大的WebUI支持脚本编辑器， 优势：         1.    基于多线程异步的调度方式；可实现爬虫的高并发爬取，注意使用代理。         2.    它提供了一个WebUI的爬虫任务管理界

>>阅读原文<<