hadoop的mapreduce任务的执行流程

hadoop2.x的三大核心:mapreduce 、hdfs以及yarn ,其中核心之一mapreduce,利用了分而治之的思想,Map(映射)和 Reduce(归约),分布式多处理而后进行汇总的思想,好比:清点扑克牌把里面的花色都分开,一我的清点那么可能耗时4分钟,若是利用mapreduce的思想,把扑克牌分红4份,每一个人对本身的那一份进行清点,而后4我的都清点完成以后把各自的相同花色放一块儿
相关文章
相关标签/搜索