小白学习大数据之路——Hadoop3.0.0-alpha2 安装以及测试程序wordcount实践

很久没看大数据,最近发现用的软件都太旧了,因此准备更行全部大数据相关的新用法。apache

tar -zxvf hadoop-3.0.0-alpha2.tar.gz
mv hadoop-3.0.0-alpha2 /usr/local/hadoop
  • 第三步:配置参数 这里由于是新版本,因此文件路径有变化,我但是费好大力气找到的。至关于旧版本的conf文件
vi etc/hadoop/gadoop-env.sh   //进入文件后修改
export JAVA_HOME=*****       //你安装的Java路径
source hadoop-env.sh             //使修改文件生效
  • 第四步:那就是jwordcount程序了
hadoop -version   //看看是否安装成功
mkdir input           //在Hadoop文件夹下新建文件夹input
cp etc/hadoop/* input    
ls     input
  • 最后一步:计数,看图吧
bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.0.0-alpha1.jar grep input output 'dfs[a-z.]+'

输入图片说明 输入图片说明

相关文章
相关标签/搜索