Hadoop I/O

HDFS中的数据完整性 HDFSZ在写入数据的时候会计算数据的校验和,针对每一个由dfs.bytes.per.checksum指定字节的数据计算校验和,默认为512个字节 当客户端读取数据的时候,会对数据的校验和进行检查,若是发现数据出现损坏,则会执行如下步骤:java 1.向Namenode报告其正在读取的数据块和所在的Datanode,以后会抛出ChecksumException异常 2.Na
相关文章
相关标签/搜索