Spark的Job、Stage、Task是按何种规则产生的

上面这张图就可以很清晰的说明这个问题。（图中最小的方块代表一个partition，包裹partition的方块是RDD，忽略颜色） Job Spark的Job来源于用户执行action操作，就是从RDD中获取结果的操作，而不是将一个RDD转换成另一个RDD的transformation操作。 Stage Spark的Stage是分割RDD执行的各种transformation而来。如上图，将这些转

>>阅读原文<<