HDFS 纠删码

时间 2020-06-11

标签 hdfs 栏目 Hadoop 繁體版

原文原文链接

目的 HDFS 集群中常常配置的3个副本是很占用空间的 - HDFS中的默认3x 复制方案在存储空间和其余资源(例如，网络带宽)上有 200%的开销。可是，对于具备较低 I/O 活动的暖数据集和冷数据集，在正常操做期间不多访问其余块副本，但仍然消耗与第一个副本相同的资源。node 所以，一种天然的改进是使用 Erasure Coding (EC) 来代替复制，它提供了相同级别的容错能力，但存储空间

>>阅读原文<<

1. HDFS纠删码
2. 纠删码
3. HDFS EC：将纠删码技术融入HDFS
4. Reed Solomon纠删码
5. 纠删码(EC)的学习
6. hadoop-3.0.0-beta1运维手册（011）：HDFS Erasure Coding纠删码使用
7. jerasure纠删
8. 详解HDFS3.x新特性-纠删码
9. 【转】Reed Solomon纠删码
10. Erasure code（纠删码）原理
更多相关文章...
• XML 编码 - XML 教程
• HTTP状态码 - HTTP 教程
• Scala 中文乱码解决
• IntelliJ IDEA代码格式化设置