【面试题】详细说一下MapReduce工作流程(MapTask过程、Shuffle过程、ReduceTask过程)

工作流程一: 工作流程二: 一个完整的mapreduce程序在分布式运行时有三类实例进程: 1)MrAppMaster:负责整个程序的过程调度及状态协调 2)MapTask:负责map阶段的整个数据处理流程 3)ReduceTask:负责reduce阶段的整个数据处理流程 工作全流程详解: 上面图一和图二中的流程是整个MapReduce最全工作流程,主要包括MapTask阶段、Shuffle阶段和
相关文章
相关标签/搜索