MapReduce详解之shuffle阶段

MapReduce详解之shuffle阶段(看图理解): Mapreduce的过程整体上分为四个阶段:InputFormat MapTask ReduceTask OutPutFormat 当然中间还有shuffle阶段 InputFormat: 我们通过在runner类中用 job.setInputPaths 或者是addInputPath添加输入文件或者是目录(这两者是有区别的)不同的业务他们
相关文章
相关标签/搜索