Spark基础随笔：Spark1.6 Idea下远程调试的2种方法

使用的开发工具：scala2.10.4、Idea16、JDK8  对于电脑配置不错或和Spark集群在同一个网下的朋友，可以使用方法1；若不是请使用方法2 方法1 把自己的电脑作为Driver端，直接把jar包提交到集群，此时Spark的Master与Worker会一直和本机的Driver端保持连接，调试比较方便。 [java]  view plain  copy import org.apach

>>阅读原文<<