《按部就班学Spark》一3.6 Shuffle机制

本节书摘来自华章出版社《按部就班学Spark》一书中的第3章,第3.6节,做者 小象学院 杨 磊,更多章节内容能够访问云栖社区“华章计算机”公众号查看。 算法 3.6 Shuffle机制markdown 在MapReduce框架中,Shuffle是链接Map和Reduce之间的桥梁,Map的输出要用到Reduce中必须通过Shuffle这个环节,Shuffle的性能高低直接影响了整个程序的性能和吞
相关文章
相关标签/搜索