hadoop上最多到底能放多少个文件?

这主要取决于NameNode的内存。由于DFS集群运行时,文件结构会保存在NameNode的内存当中。DFS每一个文件信息和 块信息大约都要占150字节。因此若是复制因子为1,每一个文件占一个block,  那么16G内存能够存 16 * (2^30) / 300 = 57 m , 即5.7 千万 个文件。内存
相关文章
相关标签/搜索