大数据框架基础MapReduce执行流程和Shuffle过程

本节将对 Hadoop MapReduce 的工作机制进行介绍，主要从 MapReduce 的作业执行流程和 Shuffle 过程方面进行阐述。通过加深对 MapReduce 工作机制的了解，可以使程序开发者更合理地使用 MapReduce 解决实际问题。 Hadoop MapReduce作业执行流程 整个 Hadoop MapReduce 的作业执行流程如图 1 所示，共分为 10 步。 图 1

>>阅读原文<<