hdfs写流程和MR缓冲区

一.hdfs的写流程 1. 客户端发起RPC请求到NameNode 2. NameNode收到请求之后,进行校验: a. 校验用户是否有操作权限 b. 校验这个文件是否存在 3. 记录元数据,计算这个文件的块的数量同时分配块的存储地址 4. NameNode就会将地址放入队列中返回给客户端 5. 客户端收到队列之后,会从队列中取出地址来进行写入 6. 在写的时候,客户端会先将数据进行封包(pack
相关文章
相关标签/搜索