MapReduce:详解Shuffle过程---map和reduce数据交互的关键

文章来源:数组   http://langyu.iteye.com/blog/992916性能优化   Shuffle描述着数据从map task输出到reduce task输入的这段过程。 网络   我的理解:app map执行的结果会保存为本地的一个文件中:oop 只要map执行 完成,内存中的map数据就必定会保存到本地文件,保存这个文件有个过程 叫作spilll(溢写),若是须要对map的
相关文章
相关标签/搜索