Spark集群架构

文章目录 Spark架构 Spark执行任务流程 Spark运行环境 Spark on YARN Spark Standalone Spark架构 Spark可以运行在YARN上也可以运行Mesos上，无论运行在哪个集群管理架构上，Spark都是以主从架构运行程序。主节点会运行Driver进程，该进程会调用Spark程序的main方法，启动SparkContext；Executor就是从节点的进程

>>阅读原文<<