Hadoop-3.0.0-alpha1搭建

Hadoop3.0.0的新特新 –最底版本的Java版本由Java7升级为Java8 –HDFS支持纠删码技术(即EC技术,它的基本原理是把M份原始数据经过矩阵运算的方式,生成K份效验数据。这样在整个M+K份数据中,丢失任何K份均可以正常恢复。最多见的糾删码配置大概会给每一份原始数据生成0.5份冗余效验数据。这样就会把整个集群的存储成本减半。糾删码的代价就是在出现故障的时候要从新执行矩阵运算来恢复
相关文章
相关标签/搜索