hadoop学习之路3-MapReduce作业生命周期

本系列均为hadoop1版本为准。。 MR作业生命周期,即用户从作业提交到运行结束经历的整个过程。如图所示: hadoop MR 作业生命周期 1.作业提交与初始化。用户提交作业后,首先由JobClient实例将作业相关信息,比如将程序jar包、作业配置文件、分片元信息文件等上传到hdfs上,其中分片元信息记录了每个输入分片的逻辑位置信息。然后JobClient通过RPC通知JobTracker。
相关文章
相关标签/搜索