大数据学习系列----WIN环境搭建Spark开发环境

下载Spark

进入下载链接,选择Spark2.1: Spark2.1html

在Path配置Spark环境变量:D:\Spark\bingit

下载Hadoop

进入下载链接github

配置Hadoop环境变量:apache

HADOOP_HOME D:\hadoop Path %HADOOP_HOME%\binoop

下载winutils.exe放入到Hadoop的bin目录下,注意若是是64位,能够自行查找64位进行下载。测试

经过D:\hadoop\bin\winutils.exe chmod 777 /tmp/hive 修改权限。spa

出现以下界面即为成功: 安装成功code

测试

本地新建一个1.txt文件:htm

Hello
World
Hello
Spark

执行结果: 输入图片说明图片

相关文章
相关标签/搜索