HDFS有点甜,比您想象中有趣!

一、HDFS就像一位“成熟的男人”,他有故事 在Hadoop2.0的时代,HDFS的默认块Block大小为128MB,原来是有深层原因的。(据说面试题经常问这个) 如果Block块太小,一个大文件被分成了若干个小Block,则需要花费很多时间用于Block文件的寻址,浪费了时间。 而Block块太大,则会降低处理效率。如MapReduce将块作为一个map处理单元,如果只有一个块,则同时只有一台服
相关文章
相关标签/搜索