Spark学习之Spark调优与调试(一)

一、使用SparkConf配置Spark 　　对 Spark 进行性能调优，通常就是修改 Spark 应用的运行时配置选项。Spark 中最主要的配置机制是通过 SparkConf 类对 Spark 进行配置。当创建出一个 SparkContext 时，就需要创建出一个 SparkConf 的实例。 import org.apache.spark.SparkContext import org.a

>>阅读原文<<