使用idea开发Scala的Wordcount程序并提交到spark集群中

开发准备,idea,配置了Scala的win10电脑,因为集群中的spark是1.6版本,所以需要Scala的版本为Scala2.10.5 接下来,将spark的包在win10解压,将lib目录下的 复制一份到一个不含中文的目录中,jar包会有两个,我们需要的是大的那个。 打开idea新建工程,按图选择 选择Scala版本,选择2.10.5的,因为之前安装过2.11的,需要选择到2.10 目录结构
相关文章
相关标签/搜索