Spark job提交过程

本文基于spark2.11 1. 前言 1.1 基本概念 RDD 关于RDD已经有不少文章了，能够参考一下理解Spark的核心RDDjavascript 依赖 依赖分为窄依赖和宽依赖，下图描述了两种依赖(图片出自spark窄依赖和宽依赖) php 20160913233559680.jpeg 从途中能够看出，窄依赖中，每个上游RDD中的分区只会被一个下游分区依赖。而宽依赖上游RDD中的分区则可能被

>>阅读原文<<