Spark基本概念与执行流程

Spark的基本概念：多线程 （1）Application：表示你的应用程序架构 （2）Driver：表示main()函数，建立SparkContext。由SparkContext负责与ClusterManager通讯，进行资源的申请，任务的分配和监控等。程序执行完毕后关闭SparkContext函数 （3）Executor：某个Application运行在Worker节点上的一个进程，该进程负责

>>阅读原文<<