Spark工作流程简述

这是参加东软大数据实习的一份平时作业，图片内容来源于课件。 Spark工作流程简述 用户构建Spark Application的运行环境，启动SparkContext（上下文） 用户编写程序提交到Master上 Master构建一个有向无环图（DAG） 根据DAG生成不同的TaskSet任务集 Master上面的Task Scheduler会把任务集分配给若干个Worker节点 worker节点会

>>阅读原文<<