checkpoint机制与hdfs的读写文件

刚复习完hadoop的相关知识,把它拿来做一个总结,方便日后查看也希望能解决大家的疑惑。 checkpoint机制 首先我们知道hadoop中存在namenode和datanode,datanode主要是用来存放数据而namenode的责任主要有三个:管理元数据,维护目录树,相应客户请求。 元数据的格式为路径,block的副本数,block_name,以及存放block的datanode 那么我们
相关文章
相关标签/搜索