idea开发第一个spark程序---统计文本单词数

在建立项目以前确保本身本地安装好了scala环境和java环境，由于spark是scala编写的，scala和java同样都是须要编译成字节码，而后在JVM里面运行。我本地的scala版本是2.11.0版本，hadoop是2.7.6版本java 第一步：打开idea，而后建立一个maven项目sql 在pom里面加入以下依赖：apache <properties> <spark.v

>>阅读原文<<