Spark32个经常使用算子总结

官方文档上列举共有32种常见算子，包括Transformation的20种操做和Action的12种操做。shell （注：如下截图为windows下运行结果）windows Transformation：数组 1.map函数 map的输入变换函数应用于RDD中全部元素，而mapPartitions应用于全部分区。区别于mapPartitions主要在于调用粒度不一样。如parallelize（1

>>阅读原文<<