MapReduce总结

MapReduce总结 1. MapReduce算法的核心概念 分而治之,切分、分别计算、合并。 2. map任务不是随便地分配给某个TaskTracker,而是根据数据本地化(Data-Local);而分配reduce任务时并不考虑数据本地化。 3. 心跳机制 TaskTracker每隔一段时间会给JobTracker发送一个心跳,反馈给JobTracker它的运行状态。 4. 作业运行过程中的
相关文章
相关标签/搜索