HDP发行版本ambari2.6.2.2安装指南

ambari2.6.2.2安装指南

1，基础软件准备：
操做系统环境：服务器linux内核3.1.0；redhat发行版本7.3，自带python2.7版本；
1.1，须要安装python2.7.5-devel.x86_64开发包，须要安装git，须要安装jdk1.8+，安装ntp服务；关闭iptables服务; 关闭suselinux安全；

1.2，准备mysql，安装mysql5.7，启动mysql，
建立用户ambari,数据库ambari,受权给ambari用户，下面设置ambari-server的时候须要；
建立用户hive,数据库hive，并受权，安装hive的时候须要；
建立用户superset,数据库superset，并受权；
Mysql用户root/###; ambari/###; hive/####; superset/###;
下载mysql jdbc驱动，放目录/usr/share/java下面，后面ambari server须要设置此路径；

1.3，安装apache http2.4服务器，后面建立本地仓库使用本服务器；

1.4，安装依赖包libtirpc-devel-0.2.4-0.8.el7.x86_64.rpm，与使用Linux的libtirpc包版本一致，否则后面安装hdp的时候报错；

1.5 配置Hostname，这里配置三台机器：
master1.hadoop.yspay
slave1.hadoop.yspay
slave2.hadoop.yspay
同时编辑etc/hosts文件，增长ip hostname对应关系

2，选择机器master1.hadoop.yspay准备本地yum仓库（否则安装大部分会失败，安装包有几十g）
2.1 在apache http目录/var/www/html目录建立文件夹ambari和hdp；并受权新建目录为o=rx;
cd /var/www/html
mkdir ambari
mkdir hdp

2.2 安装yum仓库建立工具 
yum install yum-utils createrepo

2.3 下载hdp&ambari官方仓库repo文件
hdp 
wget http://public-repo-1.hortonworks.com/HDP/centos7/2.x/updates/2.6.5.0/hdp.repo  -O /etc/yum.repo.d
ambari 
wget http://public-repo-1.hortonworks.com/ambari/centos7/2.x/updates/2.6.2.2/ambari.repo -O /etc/yum.repo.d

同时copy ambari.repo到全部待安装的机器上,hdp.repo不须要拷贝，只须要在制做本地仓库的机器上存在
scp ambari.repo root@'10.213.33.7*':/etc/yum.repo.d/

2.3 同步hdp官方仓库到本地
cd /var/www/html/hdp
reposync -r HDP-2.6.5.0                           
reposync -r HDP-GPL-2.6.5.0                     
reposync -r HDP-UTILS-1.1.0.22
cd /var/www/html/ambari
reposync -r ambari-2.6.2.2
同步远程仓库到本地过程须要几个小时，耐心等待

2.4  建立本地yum仓库
cd /var/www/html
createrepo ambari
createrepo hdp

2.5 受权文件rx权限给apache用户
cd /var/www/html
chmod -R o=rx ambari
chmod -R o=rx hdp

经过上面步骤，就能够在浏览器上面浏览本地yum仓库的安装包目录结构了 访问路径：localhost:80/ambari localhost:80/hdp

2.6 修改三台机器上面的ambari.repo的仓库源地址为本地仓库的地址
[ambari-2.6.2.2]
name=ambari Version - ambari-2.6.2.2
#baseurl=http://public-repo-1.hortonworks.com/ambari/centos7/2.x/updates/2.6.2.2
baseurl=http://master1.hadoop.yspay/ambari
#gpgcheck=1
gpgcheck=0
gpgkey=http://public-repo-1.hortonworks.com/ambari/centos7/2.x/updates/2.6.2.2/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1

修改#屏蔽的两处baseurl&gpgcheck

完成yum仓库本地化以后，安装就会快不少了

3 安装ambari服务
3.1安装ambari服务端
yum install ambari-server

3.2配置ambari服务
ambari-server setup
按提示进行，通常都默认；只有配置过程当中注意选择mysql做为数据库，数据库地址设置为安装mysql的服务器ip或者hostname，用户和库都为ambari

3.3配置mysql 驱动路径
ambari-server setup --jdbc-db=mysql --jdbc-driver=/usr/share/java/mysql-connector-java-5.1.45.jar
若是还提示驱动路径须要配置的话
vi /etc/ambari-server/conf/ambari.properties 
增长一行：server.jdbc.driver.path=/usr/share/java/mysql-connector-java-5.1.45.jar

3.4执行mysql ambari数据库的初始化脚本
mysql -uambari -p -Dambari</var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql

3.5开启ambari-server服务
ambari-server startup

如今能够在浏览器上面输入 http://机器ip:8080访问ambari服务了

4 安装ambari客户端
4.1 安装
yum install ambari-agent

4.2 配置agent，指向ambari-server地址
vi /etc/ambari-agent/conf/ambari-agent.ini
修改hostname=master1.hadoop.yspay （这台为安装ambari-server的机器）

4.3 启动ambari-agent
ambari-agent startup

5 安装hdp发行版本的hadoop套装

如今能够在浏览器上面输入 http://机器ip:8080访问ambari服务，选择install wizard开始安装
关键是第二步Select Version，
默认是版本是HDP2.6.5，选择本地仓库Use Local Repository，不要使用public Repository，设置redhat7这个linux版本的仓库地址为本地仓库地址：
redhat7
HDP-2.6
Enter Base URL or remove this OS 输入 http://master1.hadoop.yspay/hdp/HDP-2.6.5.0/
HDP-2.6-GPL
Enter Base URL or remove this OS 输入 http://master1.hadoop.yspay/hdp/HDP-GPL-2.6.5.0/
HDP-UTILS-1.1.0.22
输入 http://master1.hadoop.yspay/hdp/HDP-UTILS-1.1.0.22
后续步骤基本很简单，若是有问题，能够查看日志解决

6 配置hdfs的ha模式
进入ambari界面http://10.213.33.70:8080/ ->dashboard ->HDFS -> 界面右上service actions -> Enable NameServer HA

7 配置yarn的ha模式
进入ambari界面http://10.213.33.70:8080/ ->dashboard ->YARN -> 界面右上service actions -> Enable ResourceManager HA

若是启用HA后，以为zk不稳定致使HA切换频繁，能够禁止HA，这时候须要手动指定master 

hdfs  haadmin -failover --forcefence --forceactive  nn2 nn1