Spark-Yarn架构介绍

1.简介 MapReduct框架从hadoop-0.23版本以后发生了重大的变革, 新的计算框架我们称为MapReudce 2.0 或者 YARN(Yet-Another-Resource-Negotiator) 这篇文章主要是简单的介绍YARN的架构, 因为后续我们都会使用YARN提交Spark程序 MapReduct 2.0最主要的变革是把资源分配和任务调度隔离. 一个全局的资源管理称为Res
相关文章
相关标签/搜索