【MR原理-2】MapReduce作业提交与初始化过程分析

导读: 1. 作业提交与初始化概述 2. 作业提交过程详解 3. 作业初始化过程详解 一、作业提交与初始化概述   作业提交过程比较简单,主要为后续作业执行准备环境,主要涉及创建目录、上传文件等操作;而一旦用户提交作业后,JobTracker端便会对作业进行初始化。作业初始化的主要工作是根据输入数据量和作业配置参数将作业分解成若干个Map Task以及Reduce Task,并添加到相关数据结构中
相关文章
相关标签/搜索