HDFS的工作机制

只要你是天鹅蛋,就是生在养鸡场里也没有什么关系。——《安徒生童话》 1、概述 1.1 设计思想 分而治之:将大文件、大批量文件,分布式存放在大量服务器上,以便于采取分而治之的方式对海量数据进行运算分析; 1.2 在大数据系统中作用 为各类分布式运算框架(如:mapreduce,spark,tez,……)提供数据存储服务 重点概念:文件切块,副本存放,元数据 1.3 HDFS的概念和特性 1.3.1
相关文章
相关标签/搜索