Hadoop-MapReduce+Yarn核心原理

1. MapReduce 核心:Hadoop体系下一个编程模型(计算框架),主要是用来操作HDFS中存储数据并对HDFS中数据进行计算 2. Map+Reduce Map:用来对局部数据进行运算 局部运算 Reduce:对局部运算的结果做汇总运算 汇总运算 3. Yarn(统一资源调度器,任务资源管理器) a. 整合hadoop集群中资源(CPU,内存)进行统一调度。 比如:12核,1234G;
相关文章
相关标签/搜索