Hadoop数据完整性

用户希望储存和处理数据的时候，不会有任何损失或者损坏。 Hadoop提供两种校验 1校验和（常用循环冗余校验CRC-32） 2运行后台进程来检测数据块 校验和 写入数据节点验证 读取数据节点验证 恢复数据 Localfilesystem类 ChecksumfileSystem类 写入数据节点验证 Hdfs会对写入的所有数据计算校验和，并在读取数据时验证校验和。 元数据节点负责在验证收到的数据后，储

>>阅读原文<<