使用Hadoop分析数据——简单案例java语言编程之MaxTemperature

 为了充分发挥Hadoop提供的并行处理优点,咱们须要将查询表示成MapReduce做业。通过一些本地的小规模测试,咱们将可以在集群设备上运行Hadoop。   Map阶段和reduce阶段     MapReduce任务过程被分为两个处理阶段:map阶段和reduce阶段。每一个阶段都以键/值对做为输入和输出,并由程序员选择他们的类型。程序员还须要具体定义两个函数:map函数和reduce函数。
相关文章
相关标签/搜索