python爬虫16 | 你，快去试试用多进程的方式重新去爬取豆瓣上的电影

我们在之前的文章谈到了高效爬虫   在 python 中   多线程下的 GIL 锁会让多线程显得有点鸡肋   特别是在 CPU 密集型的代码下   多线程被 GIL 锁搞得效率不高   特别是对于多核的 CPU 来说   如果想要充分利用 CPU    还是用多进程吧   这样我们就可以做到并行爬取   提高了爬取的效率     那么，怎么玩多进程呢   恩   接下来就是   学习 pytho

>>阅读原文<<