大数据学习笔记(四)

一、HDFS校验和 用户希望在储存和处理数据的时候,不会有任何损失或损坏,HDFS提供两种校验:1.校验和 2.运行后台进程来检测数据块 校验和 写入数据节点验证 读取数据节点验证 恢复数据 Localfilesystem类 ChecksumfileSystem类 1.写入数据节点验证 Hdfs会对写入的所有数据计算校验和,并在读取数据时验证校验和。 元数据节点负责在验证收到的数据后,储存数据及其
相关文章
相关标签/搜索