通过分区(Partitioning)提高Spark的运行性能

　在使用Spark的过程中他们发现了一个能够提高Spark job性能的一个技巧，也就是修改数据的分区数，本文将举个例子并详细地介绍如何做到的。 文章目录 1 查找质数 2 为什么会出现这种情况？ 3 如何解决 查找质数 　　比如我们需要从2到2000000之间寻找所有的质数。我们很自然地会想到先找到所有的非质数，剩下的所有数字就是我们要找的质数。 　　我们首先遍历2到2000000之间的每个数，

>>阅读原文<<