如何构建一个分布式爬虫

转载自： http://python.jobbole.com/87823/ http://python.jobbole.com/87826/ http://python.jobbole.com/87833/ 理论篇 前言 本系列文章计划分三个章节进行讲述，分别是理论篇、基础篇和实战篇。理论篇主要为构建分布式爬虫而储备的理论知识，基础篇会基于理论篇的知识写一个简易的分布式爬虫，实战篇则会以微博为例，

>>阅读原文<<