spark07(checkpoint、任务调度)

文章目录 RDD容错机制之checkpoint checkpoint是什么 checkpoint原理机制 Spark任务调度 Spark运行架构 任务调度流程图 DAGScheduler TaskScheduler RDD容错机制之checkpoint checkpoint是什么 （1）、Spark 在生产环境下经常会面临transformation的RDD非常多（例如一个Job中包含1万个RDD

>>阅读原文<<