MapReduce 的知识点详解

Shuffle(混洗) shuffle 输入是key value的 list shuffle 输出是key value的list MapReduce计算任务的步骤 第一步 :inputFormat inputFormat到hdfs上读取数据 将数据传给split 第二步split split将数据进行逻辑切分,将数据传给RR 第三步:RR RR:将传入的数据转换成一行一行的数据,输出行首字母的偏移
相关文章
相关标签/搜索