HDFS——数据备份与放置策略(转)

对于分布式文件系统来说,为了保证数据的高可用性和系统容错能力,往往会把同一数据块在多个节点上进行备份,那么如何分配这些复制数据的位置,不同的文件系统会有不同的策略。 一、业界分析 在介绍HDFS之前,先简单了解一些其它文件系统的放置策略: 1. Lustre——一致性哈希环 对于不同的数据备份,需要放到不同的节点上面,一种直观的想法就是利用Hash函数,这样可以把每个备份id对应到一个哈希值,然后
相关文章
相关标签/搜索