hadoop-checkpoint(元数据管理)机制

namenode对元数据的管理 1可以将元数据信息记录在内存对象(tree结构) 2可以将数据储存在磁盘中 原理流程 1在安装hadoop集群是对hadoop进行初始化设置(hadoop namenode-format),会自动生成Fsimage; 2操作服务器时产生的日志会保存到日志管理系统中 3在操作是一边往fsimage写数据,一边记录日志 4定期将fsimage序列化到本地磁盘image文

>>阅读原文<<