【Spark二九】涂鸦

  涂鸦一 1. Spark为什么如此之外 a.基于内存 Spark将数据加载到内存中之后，此后的计算都在内存中进行，这就非常适合递归迭代的计算任务，同时对交互式即席查询型任务也能做到将数据加载到内存中，如下图所示。 b. DAG Spark在内部将对数据的操作绘制成一张有向无环图，只有在真正需要结果的时候，才对数据依次执行这些操作。也就是说，在有向无环图中，除非需要结果而不得不进行计算时才会进行

>>阅读原文<<