mapReduce job的提交流程

举一个非常简单的例子,通过mapreduce计算单词数量,下面为相关代码: 1)准备环境,创建一个java工程,导入相关hdfs jar包,这些so easy 不在复述。 2)首先我们都知道mapreduce框架,经过2个阶段,一个map阶段一个reduce阶段,所以我们首先要创建一个map来整理我们的单词和数量然后通过reduce来计算我们的单词相关总数。相关代码如下: 我们可以把上面工程打成j
相关文章
相关标签/搜索