MapReduce详细流程

MR整体流程: 准备待处理文本,文本相关信息(输入路径: /user/input、文件名称: ss.txt , 文件大小:200M)。 客户端获取待处理的数据信息(比如ss.txt根据块大小128M切分成块1的128M和块2的72M),根据参数配置,形成任务分配的规划。 客户端submit(),提交Job到Yarn (提交内容:Job.split-切片信息, jar包, Job.xml)。 Res
相关文章
相关标签/搜索