关于HDFS的 block、packet与chunk详解

block、packet与chunk 在DFSClient写HDFS的过程中,有三个需要搞清楚的单位:block、packet与chunk; block是最大的一个单位,它是最终存储于DataNode上的数据粒度,由dfs.block.size参数决定,默认是64M;注:这个参数由客户端配置决定; packet是中等的一个单位,它是数据由DFSClient流向DataNode的粒度,以dfs.wr
相关文章
相关标签/搜索