Spark-Core高级篇

文章目录 高级应用 1、RDD的分片数量 2、函数转换的问题 3、RDD的持久化 4、RDD的检查点机制 5、RDD运行方式 <1>RDD任务划分 <2>RDD依赖关系 <3>DAG的生成 <4>Lineage 6、键值对RDD分区 7、RDD进阶 <1>累计器 <2>自定义累加器 <3>广播变量 高级应用 1、RDD的分片数量 def makeRDD[T: ClassTag]( se

>>阅读原文<<