30天搞定spark源码系列-RDD番外篇-shuffledRDD

阅读这篇文章,你应该能得到这样几个问题的答案: 什么是spark的shuffle? 典型的shuffle类算子 spark shuffle在实战中的优化方向 shuffledRDD的基本流程和代码框架是什么 1、spark shuffle 相信对于使用过spark的童鞋来说,不管是spark sql或者spark core,除了写业务逻辑之外如果你涉及到spark调优的话,就必须深入了解spark
相关文章
相关标签/搜索