HDFS的介绍

设计思想 分而治之:将大文件、大批量文件,分布式存放在大量服务器上,以便于采取分而治之的方式对海量数据进行运算分析; 在大数据系统中作用:为各类分布式运算框架(如:mapreduce,spark,tez,……)提供数据存储服务 重点概念:文件切块,副本存放,元数据 HDSF的重要特性  首先,它是一个文件系统,用于存储文件,通过统一的命名空间——目录树来定位文件  其次,它是分布式的,由很多服务器
相关文章
相关标签/搜索