Hadoop之HDFS、MapReduce小结

Hadoop学习过程中的小结 Hadoop概念 HDFS MapReduce(分而治之) Yarn框架 shuffle机制 RPC框架 Hadoop概念 Hadoop是一个开源的、分布式存储和分布式计算平台,Hadoop的组成包括两个核心部分:   HDFS:分布式文件系统,存储海量的数据   MapReduce:并行处理框架,实现任务分解和调度 HDFS 【1】HDFS基本概念  HDFS是通过
相关文章
相关标签/搜索