网络爬虫的分类

网络爬虫按照系统结构和实现技术，大体能够分为如下几种类型：通用网络爬虫（General Purpose Web Crawler）、聚焦网络爬虫（Focused Web Crawler）、增量式网络爬虫（Incremental Web Crawler）、深层网络爬虫（Deep Web Crawler）。 实际的网络爬虫系统一般是几种爬虫技术相结合实现的 。web 通用网络爬虫算法 通用网络爬虫又称全

>>阅读原文<<