Hadoop作业提交深度剖析

在这个系列中,我将深入分析一个MapReduce作业的提交与初始化过程 从用户输入提交作业命令到作业初始化的整个过程,该过程涉及JobClient、JobTrack和TaskScheduler三个组件,它们的功能分别是:准备运行环境、接收作业、初始化作业。 作业的提交过程比较简单,主要是为后续的作业执行准备环境,主要涉及创建目录、上传文件等操作,而一旦用户提交作业后,JobTrack端便会对作业进
相关文章
相关标签/搜索