spark 小demo

本文是利用scala进行wordcount的demo，环境是scala 2.11.8、 esclipse for scala 、spark 2.1.0 hadoop 2.7.3 1、首先命令行形式运行demo （1）在你hdfs下的随便一个文件夹新建一个txt文件，做被统计文件夹，这里我是在tmp文件夹下新建的 hdfs dfs -touchz /tmp/input.txt 然后在文件里写进点东西

>>阅读原文<<