spark学习--grouByKey 和 reduceByKey区别及reduceByKey特点在spark调优中的利用

Spark学习---GrouByKey和reduceByKey的区别,以及reduceByKey特点在spark优化中的使用 先来一个例子: 需求:读取学生信息表到SparkContext后,分别使用GroupByKey,reduceByKey统计各班的人数 代码和结果如下: 获取SparkContext: 使用groupByKey---结果和代码放到一起截图的: reduceByKey: 结果一
相关文章
相关标签/搜索