如何让你的Python爬虫采集得更快

如何让你的Python爬虫采集得更快 转自：http://www.site-digger.com/html/articles/20131019/69.html     鲲鹏数据的技术人员长期从事Python爬虫的开发工做，如何让Python爬虫采集的更快，如何处理海量数据的下载是咱们一直探索和研究的对象。下面是咱们从数学角度给出的一些分析以及咱们的一些经验分享。html     假设线程数为n，线

>>阅读原文<<