spark程序中cache的作用 + 实验

spark中cache的作用: 图例: 其中, result1和result2用到了同一个rdd(rdd2)做操作 如果rdd2不加cache: 由于spark程序为lazy操作, 所以在计算result1时, step1 -> step2 -> step3会全部走一遍, 计算result2时, step1 -> step2 -> step3也会全部走一遍, 其中step1 -> step2为重复

>>阅读原文<<