《精通Python网络爬虫:核心技术、框架与项目实战》——1.3 网络爬虫的组成...

本节书摘来自华章出版社《精通Python网络爬虫:核心技术、框架与项目实战》一书中的第1章,第1.3节,作者 韦 玮,更多章节内容可以访问云栖社区“华章计算机”公众号查看。 1.3 网络爬虫的组成 接下来,我们将介绍网络爬虫的组成。网络爬虫由控制节点、爬虫节点、资源库构成。 图1-1所示是网络爬虫的控制节点和爬虫节点的结构关系。 可以看到,网络爬虫中可以有多个控制节点,每个控制节点下可以有多个爬虫
相关文章
相关标签/搜索