以wordcount理解spark的执行过程

以wordcount理解spark的执行过程: 一、代码以及交互界面的回应: (RDD是spark的核心抽象,全部的计算都围绕RDD进行,生成RDD,而后能够对RDD进行各类操做, 这些操做主要有两类: Transformation(转换) [一个RDD进过计算生成一个新的RDD,好比接下来示例中的flatMap、map、reduceByKey] 和 Action(动做) [返回结果到Driver
相关文章
相关标签/搜索