唯品会HDFS性能挑战和优化实践

本文以唯品会HDFS实际应用场景和问题导向触发,介绍了优化方案的局限性,分享了这些局限性的解决和实施经验。这对于技术运营较大规模的HDFS集群有一定借鉴意义。 1. 性能挑战 HDFS 是一个分布式系统,只要有足够的资源,可以扩容上千个节点支持100PB以上的集群。我们发现Hadoop集群升级(2.5.0-cdh5.3.2–\u0026gt;2.6.0-cdh5.13.1)以后,NameNode
相关文章
相关标签/搜索