MapReduce计算的流程-Hadoop

输入 --> map --> shuffle --> reduce -->输出 1 map端        分块         针对上传到hdfs上的文件,会针对文件进行分块(物理分块,固定大小64M,多余的则进行分,少的则不变),分块之后存储相应的datanode计算机的磁盘上面;          把File划分成Block,这个是物理上真真实实的进行了划分,数据文件上传到HDFS里的时候,
相关文章
相关标签/搜索