Spark2原理分析-DAGScheduler(Stage调度器)的基本概念

概述 本文介绍Saprk中DAGScheduler的基本概念。该对象实现了一个面向Stage的高层调度器。它为每个Job计算一个Stage的DAG图，并跟踪这些RDD和Stage的输出，并找到一个最小的代价的DAG图来运行该Job。 DAGScheduler介绍 在文章《spark2原理分析-Stage的实现原理》中，介绍了Stage的基本概念和Stage的提交实现原理。本文主要介绍 DAGSch

>>阅读原文<<