安装配置hadoop

如有不足之处，请求指点一二，谢谢！(*^__^*) 

所需配置及版本：

Vmware workstation 14 Pro

Ubuntu 16.04

openjdk 1.8.0_191

hadoop-1.2.1

1.首先须要安装jdk，并配置环境

1.1 检查是否存在jdk，若无，则在root用户下输入如下命令

apt install openjdk-8-jdk-headless

1.2 查看jdk是否安装成功，若成功，则会显示如下信息：

java -version

1.3 配置jdk环境，输入如下命令来修改文件，修改成以下代码：

vim /etc/profile

1.4 保存退出，并执行文件后，分别输入如下命令，检查jdk环境是否配置成功，若成功，则会显示以下信息：

echo $JAVA_HOME
echo $JRE_HONE
echo $PATH

 

2.安装hadoop

2.1 若官方的hadoop下载不成功，则输入如下命令来下载hadoop：

wget http://archive.apache.org/dist/hadoop/core/hadoop-1.2.1/hadoop-1.2.1.tar.gz

2.2 解压hadoop，并查看是否成功解压：

tar zxvf hadoop-1.2.1.tar.gz

3.配置hadoop环境

3.1 进入hadoop-1.2.1，而后进入conf，并将里的JAVA_HOME的路径修改为前面配置jdk时的路径：

vim hadoop-env.sh

3.2 配置core-site.xml文件：

3.3 配置hdfs-site.xml文件：

3.4 配置mapred-site.xml文件：

3.5 将hadoop的路径配置到profile文件中：

3.6 进入到hadoop-1.2.1的bin中， namenode格式化：

hadoop namenode -format

3.7 启动hadoop:

sh start-all.sh

3.8 如hadoop启动失败，则需安装SSH：

sudo apt-get install openssh-server

3.9 使用jps检查hadoop是否正常运行，并获得结果为: