Hadoop2.7.4 MapReduce开发部署步骤

一、  目标 基于Hadoop2.X 开发及部署MapReduce任务   l  案例需求 计算在1949年-1951年,每年温度最高的前3天   l 思路:       1.按年份升序排序,同时每一年中温度按降序排序 2.按年分组,每一年对应一个reduce任务   l 技术实现: 1.mapreduce四个步骤:split、mapper、shuffle、reduce,其中shuffle分组、排
相关文章
相关标签/搜索