ZooKeeper集群的安装、配置、高可用测试 Dubbo注册中心集群Zookeeper-3.4.6

Dubbo建议使用Zookeeper做为服务的注册中心。

Zookeeper集群中只要有过半的节点是正常的状况下，那么整个集群对外就是可用的。正是基于这个特性，要将ZK集群的节点数量要为奇数（2n+1：如三、五、7个节点）较为合适。

 

ZooKeeper与Dubbo服务集群架构图

 

服务器1：192.168.1.81  端口：2181、2881、3881

服务器2：192.168.1.82  端口：2182、2882、3882

服务器3：192.168.1.83  端口：2183、2883、3883

 

1. 修改操做系统的/etc/hosts文件，添加IP与主机名映射：

# zookeeper cluster servers

192.168.1.81   edu-zk-01

192.168.1.82   edu-zk-02

192.168.1.83   edu-zk-03

 

1. 下载或上传zookeeper-3.4.6.tar.gz到/home/wusc/zookeeper目录：

$ cd /home/wusc/zookeeper

$ wget http://apache.fayea.com/zookeeper/zookeeper-3.4.6/zookeeper-3.4.6.tar.gz

 

1. 解压zookeeper安装包，并按节点号对zookeeper目录重命名：

$ tar -zxvf zookeeper-3.4.6.tar.gz

服务器1：

$ mv zookeeper-3.4.6 node-01

服务器2：

$ mv zookeeper-3.4.6 node-02

服务器3：

$ mv zookeeper-3.4.6 node-03

 

1. 在各zookeeper节点目录下建立如下目录：

$ cd /home/wusc/zookeeper/node-0X  (X表明节点号一、二、3，如下同解)

$ mkdir data

$ mkdir logs

 

1. 将zookeeper/node-0X/conf目录下的zoo_sample.cfg文件拷贝一份，命名为zoo.cfg:

$ cp zoo_sample.cfg zoo.cfg

 

1. 修改zoo.cfg配置文件：

zookeeper/node-01的配置（/home/wusc/zookeeper/node-01/conf/zoo.cfg）以下：

tickTime=2000

initLimit=10

syncLimit=5

dataDir=/home/wusc/zookeeper/node-01/data

dataLogDir=/home/wusc/zookeeper/node-01/logs

clientPort=2181

server.1=edu-zk-01:2881:3881

server.2=edu-zk-02:2882:3882

server.3=edu-zk-03:2883:3883

 

 

zookeeper/node-02的配置（/home/wusc/zookeeper/node-02/conf/zoo.cfg）以下：

tickTime=2000

initLimit=10

syncLimit=5

dataDir=/home/wusc/zookeeper/node-02/data

dataLogDir=/home/wusc/zookeeper/node-02/logs

clientPort=2182

server.1=edu-zk-01:2881:3881

server.2=edu-zk-02:2882:3882

server.3=edu-zk-03:2883:3883

 

zookeeper/node-03的配置（/home/wusc/zookeeper/node-03/conf/zoo.cfg）以下：

tickTime=2000

initLimit=10

syncLimit=5

dataDir=/home/wusc/zookeeper/node-03/data

dataLogDir=/home/wusc/zookeeper/node-03/logs

clientPort=2183

server.1=edu-zk-01:2881:3881

server.2=edu-zk-02:2882:3882

server.3=edu-zk-03:2883:3883

 

参数说明:

tickTime=2000

tickTime这个时间是做为Zookeeper服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是每一个tickTime时间就会发送一个心跳。

 

initLimit=10

initLimit这个配置项是用来配置Zookeeper接受客户端（这里所说的客户端不是用户链接Zookeeper服务器的客户端,而是Zookeeper服务器集群中链接到Leader的Follower 服务器）初始化链接时最长能忍受多少个心跳时间间隔数。当已经超过10个心跳的时间（也就是tickTime）长度后 Zookeeper 服务器尚未收到客户端的返回信息,那么代表这个客户端链接失败。总的时间长度就是 10*2000=20 秒。

 

syncLimit=5

syncLimit这个配置项标识Leader与Follower之间发送消息,请求和应答时间长度,最长不能超过多少个tickTime的时间长度,总的时间长度就是5*2000=10秒。

 

dataDir=/home/wusc/zookeeper/node-01/data

dataDir顾名思义就是Zookeeper保存数据的目录,默认状况下Zookeeper将写数据的日志文件也保存在这个目录里。

 

clientPort=2181

clientPort这个端口就是客户端（应用程序）链接Zookeeper服务器的端口,Zookeeper会监听这个端口接受客户端的访问请求。

 

 

server.A=B：C：D

server.1=edu-zk-01:2881:3881

server.2=edu-zk-02:2882:3882

server.3=edu-zk-03:2883:3883

A是一个数字,表示这个是第几号服务器；

B是这个服务器的IP地址（或者是与IP地址作了映射的主机名）；

C第一个端口用来集群成员的信息交换,表示这个服务器与集群中的Leader服务器交换信息的端口；

D是在leader挂掉时专门用来进行选举leader所用的端口。

注意：若是是伪集群的配置方式，不一样的 Zookeeper 实例通讯端口号不能同样，因此要给它们分配不一样的端口号。

 

1. 在dataDir=/home/wusc/zookeeper/node-0X/data下建立myid文件

编辑myid文件，并在对应的IP的机器上输入对应的编号。如在node-01上，myid文件内容就是1,node-02上就是2，node-03上就是3：

$ vi /home/wusc/zookeeper/node-01/data/myid  ## 值为1

$ vi /home/wusc/zookeeper/node-02/data/myid  ## 值为2

$ vi /home/wusc/zookeeper/node-03/data/myid  ## 值为3

 

1. 在防火墙中打开要用到的端口218X、288X、388X

切换到root用户权限，执行如下命令：

# chkconfig iptables on

# service iptables start

编辑/etc/sysconfig/iptables

# vi /etc/sysconfig/iptables

如服务器01增长如下3行：

## zookeeper

-A INPUT -m state --state NEW -m tcp -p tcp --dport 2181 -j ACCEPT

-A INPUT -m state --state NEW -m tcp -p tcp --dport 2881 -j ACCEPT

-A INPUT -m state --state NEW -m tcp -p tcp --dport 3881 -j ACCEPT

 

重启防火墙：

# service iptables restart

查看防火墙端口状态：

# service iptables status

 

1. 启动并测试zookeeper（要用wusc用户启动，不要用root）:

1. 使用wusc用户到/home/wusc/zookeeper/node-0X/bin目录中执行：

$ /home/wusc/zookeeper/node-01/bin/zkServer.sh start

$ /home/wusc/zookeeper/node-02/bin/zkServer.sh start

$ /home/wusc/zookeeper/node-03/bin/zkServer.sh start

 

1. 输入jps命令查看进程：

$ jps

1456 QuorumPeerMain

其中，QuorumPeerMain是zookeeper进程，说明启动正常

1. 查看状态：

$ /home/wusc/zookeeper/node-01/bin/zkServer.sh status

1. 查看zookeeper服务输出信息：

因为服务信息输出文件在/home/wusc/zookeeper/node-0X/bin/zookeeper.out

$ tail -500f zookeeper.out

 

1. 中止zookeeper进程：

$ zkServer.sh stop

 

1. 配置zookeeper开机使用wusc用户启动：

编辑node-0一、node-0二、node-03中的/etc/rc.local文件，分别加入：

su - wusc -c '/home/wusc/zookeeper/node-01/bin/zkServer.sh start'

su - wusc -c '/home/wusc/zookeeper/node-02/bin/zkServer.sh start'

su - wusc -c '/home/wusc/zookeeper/node-03/bin/zkServer.sh start'

 

 

2、安装Dubbo管控台（基础篇有讲,此处重点讲管控台如何连接集群）：

Dubbo管控台能够对注册到zookeeper注册中心的服务或服务消费者进行管理，但管控台是否正常对Dubbo服务没有影响，管控台也不须要高可用，所以能够单节点部署。

 

IP: 192.168.1.81

部署容器：Tomcat7

端口：8080

1. 下载（或上传）最新版的Tomcat7（apache-tomcat-7.0.57.tar.gz）到/home/wusc/

 

1. 解压：

$ tar -zxvf apache-tomcat-7.0.57.tar.gz

$ mv apache-tomcat-7.0.57 dubbo-admin-tomcat

 

1. 移除/home/wusc/dubbo-admin-tomcat/webapps目录下的全部文件：

$ rm -rf *

 

1. 上传Dubbo管理控制台程序dubbo-admin-2.5.3.war

到/home/wusc/dubbo-admin-tomcat/webapps

 

1. 解压并把目录命名为ROOT:

$ unzip dubbo-admin-2.5.3.war -d ROOT

把dubbo-admin-2.5.3.war移到/home/wusc/tools目录备份

$ mv dubbo-admin-2.5.3.war /home/wusc/tools

 

1. 配置dubbo.properties：

$ vi ROOT/WEB-INF/dubbo.properties

dubbo.registry.address= zookeeper://192.168.1.81:2181?backup=192.168.1.82:2182,192.168.1.83:2183

dubbo.admin.root.password=wusc.123

dubbo.admin.guest.password=wusc.123

（以上密码在正式上生产前要修改）

 

1. 防火墙开启8080端口，用root用户修改/etc/sysconfig/iptables，

# vi /etc/sysconfig/iptables

增长：

## dubbo-admin-tomcat:8080

-A INPUT -m state --state NEW -m tcp -p tcp --dport 8080 -j ACCEPT

重启防火墙：

# service iptables restart

1. 启动Tomat7

$ /home/wusc/dubbo-admin-tomcat/bin/startup.sh