本地调试spark程序

用IDEA编写spark程序,每次运行都要先打成jar包,然后再提交到集群上运行,这样很麻烦,不方便调试。 我们可以直接在Idea中调试spark程序。 例如下面的WordCount程序: package cn.edu360.spark import org.apache.spark.rdd.RDD import org.apache.spark.{SparkConf, SparkContext
相关文章
相关标签/搜索