对于Pyspider爬虫框架你知道多少？

Pyspider  是一个用python实现的功能强大的网络爬虫系统，能在浏览器界面上进行脚本的编写，功能的调度和爬取结果的实时查看，后端使用常用的数据库进行爬取结果的存储，还能定时设置任务与任务优先级等。 主要功能需求： 1、抓取，更新调度多站点的特定的页面 2、需要对页面进行结果化信息的提取 3、灵活可扩展，稳定可监控 Pyspider设计基础： 1、 通过python脚本进行结构化信息的提取

>>阅读原文<<