Python爬虫开发与项目实战 3: 初识爬虫

3.1 网络爬虫概述      概念：按照系统结构和实现技术，大体可分：通用网络爬虫、聚焦爬虫、增量式爬虫、深层爬虫。实际的爬虫系统一般是几种技术的相结合实现的。html            搜索引擎：属于通用爬虫，但存在必定的局限性：python                         检索结果包含大量用户不关心的网页git                         有限的服务器

>>阅读原文<<