开源爬虫软件汇总

转载自：http://blog.chinaunix.net/uid-22414998-id-3774291.html html  世界上已经成型的爬虫软件多达上百种，本文对较为知名及常见的开源爬虫软件进行梳理，按开发语言进行汇总，以下表所示。虽然搜索引擎也有爬虫，但本次我汇总的只是爬虫软件，而非大型、复杂的搜索引擎，由于不少兄弟只是想爬取数据，而非运营一个搜索引擎。web 开源爬虫汇总表 正则表达

>>阅读原文<<