数据挖掘_并行并发介绍和同步异步介绍

  前面跟大家讲的request s和spynner都是单进程（单线程）的顺序抓取，而并发和并行执行的异步抓取会极大地提高抓取效率。   并行和并发 并发和并行使两个相似的概念，并发是指在一个时间段内发生若干事件的情况，并行是指在同一时刻发生若干事件的情况。 我们可以以CPU的工作方式来说明这两个概念   单核CPU下，多任务操作系统的各任务是以并发的方式运行的，因为只有一个处理器，所以各任务会以

>>阅读原文<<