Spark on Yarn的运行原理

  一、YARN是集群的资源管理系统 1、ResourceManager：负责整个集群的资源管理和分配。 2、ApplicationMaster：YARN中每个Application对应一个AM进程，负责与RM协商获取资源，获取资源后告诉NodeManager为其分配并启动Container。 3、NodeManager：每个节点的资源和任务管理器，负责启动/停止Container，并监视资源使用

>>阅读原文<<