Hadoop之HDFS工作原理

HDFS特点 HDFS(Hadoop Distributed File System )Hadoop分布式文件系统。 HDFS有如下特点: 保存多个副本,且提供容错机制,副本丢失或宕机自动恢复。默认存3份。 运行在廉价的机器上。 适合大数据的处理。HDFS默认会将文件分割成block,64M为1个block。然后将block按键值对存储在HDFS上,并将键值对的映射存到内存中。如果小文件太多,那内
相关文章
相关标签/搜索