spark core源码阅读-RDD详细介绍(四)

以前对RDD有一个大致概念了解,这一节咱们须要深刻了解它,了解在源码中究竟是什么, 怎么产生的,给个rdd之间怎么依赖的,最后又怎么生成spark jobjavascript 咱们仍是先从一个例子下手:java val sc = new SparkContext(sparkConf) val res = sc .textFile(args(0)) .flatMap(line => lin

>>阅读原文<<