Spark Core入门2【RDD的实质与RDD编程API】

1、对RDD操做的本质 RDD的本质是一个函数,而RDD的变换不过是函数的嵌套.RDD有两类:php 输入的RDD: 典型如KafkaRDD、JDBCRDD 转换的RDD: 如MapPartitionsRDD RDD的处理流程:html 以以下代码为例:java sc.textFile("abc.log").map().saveAsTextFile("") 1. textFile 会构建出一个Ne
相关文章
相关标签/搜索