【Spark亚太研究院系列丛书】Spark实战高手之路-第一章 构建Spark集群(第五步)(13)

从控制台能够看到咱们的程序成功在集群上运行:ide

Detail for stage 1:idea

Detail for Stage 0:spa

查看一下Executors的信息:开发

上述信息代表程序成功在Spark集群上运行。get

第四步:基于IDEA构建Spark开发环境it

1,下载IDEA13.1.4社区版本“Community Edition FREEspark

http://www.jetbrains.com/idea/download/ io

2,安装IDEA并配置IDEA系统环境变量社区

具体安装和配置过程请参考【Spark亚太研究院系列丛书】-第一章 构建Spark集群(第四步)http://down.51cto.com/data/1848627 ast

3,使用IDEA开发Spark程序,咱们这里使用SparkPi来验证开发环境

具体开发和配置过程请参考【Spark亚太研究院系列丛书】-第一章 构建Spark集群(第四步)http://down.51cto.com/data/1848627

4,经过IDEA在集群上运行程序,此时须要加入

“conf.setMaster(spark://192.168.35.129:7077)” 

运行之便可。

相关文章
相关标签/搜索