Hadoop：The Definitive Guid 总结 Chapter 4 Hadoop I/O

Hadoop：The Definitive Guid 总结 Chapter 4 Hadoop I/O 1.数据的完整性 1).HDFS的数据完整性 HDFS以透明方式校验所有写入它的数据，并在默认设置下，会在读取数据时验证校验和。针对数据的每个io.bytes.per.checksum字节都会创建一个单独的校验和。默认值为512字节； DataNode负责在存储数据（包括数据的校验和）之前验证它们

>>阅读原文<<