大数据开发1--MapReduce计算框架

MapReduce实现原理 一、MapReduce1.x架构 Job:用户的每一个计算请求,称为一个作业。 JobTracker:负责接收用户提交的作业,负责启动、跟踪任务执行。   作为作业的管理者,它将作业分解成很多Task并分派给TaskTracker进行运行,Task包含MapTask和ReduceTask。   它还需要完成作业的监控以及容错处理(task作业挂掉了,会重启task)。如
相关文章
相关标签/搜索