Linux下搭建tomcat集群

1.预期目标

本文将讲述如何在Linux下搭建tomcat集群，以及搭建过程当中可能的遇到的问题和解决方法。为简单起见，本文演示搭建的集群只有两个tomact节点外加一个apache组成，三者将安装在同一机器上：
apache:
安装路径：/usr/local/apache2
端口：90
tomcat1:
安装路径：/usr/local/apache-tomcat-6.0.33-1
端口：6080
tomcat2:
安装路径：/usr/local/apache-tomcat-6.0.33-2
端口：7080

2.所须要软件列表

apache

当前最新版本：2.2.21
本文采用源码方式安装，源码包下载地址：http://labs.renren.com/apache-mirror//httpd/httpd-2.2.21.tar.gz
其余版本下载地址参见：http://httpd.apache.org/download.cgi

tomcat 6

当前最新版本：6.0.33
本文使用自解压的tar.gz包进行安装，下载地址：http://labs.renren.com/apache-mirror/tomcat/tomcat-6/v6.0.33/bin/apache-tomcat-6.0.33.tar.gz
其余版本下载地址参见：http://tomcat.apache.org/download-60.cgi

Apache Tomcat Connector (也就是mod_jk)

当前最新版本：JK-1.2.32
本文采用源码方式安装，源码包下载地址：http://www.apache.org/dist/tomcat/tomcat-connectors/jk/tomcat-connectors-1.2.32-src.tar.gz
其余版本下载地址参见：http://tomcat.apache.org/download-connectors.cgi

3.软件安装

3.1 安装apache

1.进入下载好的httpd-2.2.21.tar.gz文件所在目录，执行解压操做：
tar -zxvf httpd-2.2.21.tar.gz

2.进入解压出的文件夹根目录：
cd httpd-2.2.21

3.进行编译参数配置:
./configure --prefix=/usr/local/apache2 --enable-mods-shared=all
关于configure参数的更多内容可参考：
http://httpd.apache.org/docs/2.2/en/programs/configure.html#installationdirectories

4.编译安装:
make
make install

5.启动和关闭apache
完成上述步骤后，apache的安装就结束了，经过下面的命令启动和关闭apache：
启动：
/usr/local/apache2/bin/apachectl start
关闭：
/usr/local/apache2/bin/apachectl stop

3.2 关于在安装apache过程当中报Cannot use an external APR with the bundled APR-util错误的解决办法

有时候，在安装apache，执行./configure操做时会报这个错误，解决方法是安装apache2.2.x自身携带的apr,方法为：

1.自源码安装目录httpd-2.2.21进入apache2.2.x自带apr的安装目录
cd srclib/apr

2.安装apr(此处将之安装在/usr/local/apr下，若是系统中已经安装apr，可找到安装目录进行覆盖)
./configure --prefix=/usr/local/apr
make
make install

3.安装apr-util
./configure --prefix=/usr/local/apr-util --with-apr=/usr/local/apr
make
make install

4.使用新安装的apr从新进行apache编译配置
放回安装根目录httpd-2.2.21，执行：
./configure --prefix=/usr/local/apache2 \
--enable-mods-shared=all \
--with-apr=/usr/local/apr \
--with-apr-util=/usr/local/apr-util/bin

补充：

若是你安装是apache-2.4以上版本，有如下几点不一样：

一、须要单独下载apr和apr-util

apr下载地址： http://mirror.bjtu.edu.cn/apache//apr/apr-1.4.6.tar.bz2

apr-util下载地址：http://mirror.bjtu.edu.cn/apache//apr/apr-util-1.4.1.tar.bz2

2. 此外还须要安装pcre

去http://pcre.org/下载pcre,解压进入源码目录执行

./configure --prefix=/usr/local/pcre

3. 最后安装apache时configure须要这样配置

./configure --prefix=/usr/local/apache2 \
--enable-mods-shared=all \
--with-apr=/usr/local/apr \
--with-apr-util=/usr/local/apr-util/bin

--with-pcre=/usr/local/pcre

3.3 安装Apache Tomcat Connector(mod_jk)

1.进入下载好的tomcat-connectors-1.2.32-src.tar.gz文件所在目录，执行解压操做：
tar -zxvf tomcat-connectors-1.2.32-src.tar.gz

2.进入解压出的文件夹下的native子目录：
cd tomcat-connectors-1.2.32-src/native

3.进行编译参数配置:
./buildconf.sh

./configure --with-apxs=/usr/local/apache2/bin/apxs \
--with-java-home=$JAVA_HOME --with-java-platform=2 \
--enable-jni

4.编译安装:
make
make install

若是成功结束，你能够在/usr/local/apache2/modules/下找到mod_jk.so文件。

3.4 安装tomcat
两次解压下载到的apache-tomcat-6.0.33.tar.gz文件至/usr/local/，并分别重命名为apache-tomcat-6.0.33-1和apache-tomcat-6.0.33-2

4.集群配置

4.1 配置tomcat

1.修改端口
对于tomcat配置主要集中在conf/server.xml文件上。首先，鉴因而在同一机器上运行两个tomcat实例，所以，要对server.xml中配置的全部端口进行修改，避免端口被占用，一种简单而稳妥的修改方法是将该文件中出现的全部端口号按一种简单的规则统一进行改动，好比在原端口号基础上统一加1000或减1000。基于这个原则，apache-tomcat-6.0.33-1的链接端口修改成：6080，apache-tomcat-6.0.33-2的链接端口修改成：7080，其余端口配置一样依照该原则。

2.开启tomcat集群支持
一样是在conf/server.xml文件里，进行两处改动：

改动1：为<Engine>设置jvmRoute

实际上，在server.xml里就有一段现成的带jvmRoute的<Engine>配置，咱们能够参考这段配置为<Engine/>加个jvmRoute就能够了，对于jvmRoute的取值要特别注意：其值必须于后面要提到的mod_jk的workers.properties文件中结点名相一致！因为那个文件中结点名为tomcat1和tomcat2,所以，此处咱们必须设定jvmRoute的值为这两个值之一。关于这一点在tomcat官方关于Apache Tomcat Connector的文档 http://tomcat.apache.org/connectors-doc/webserver_howto/apache.html 也有明确说起。jvmRoute值会出如今由该结点建立的session id中，例如：在非集群环境下，一个sessionid多是 “xxxxxxxxx” 的格式，而在集群环境下，若是当前结点的jvmRtomat1oute被配置为tomcat1,那由该结点生成的sessionid将变成“xxxxxxxxx.tomat1”格式，而mod_jk正是依赖于这个节点后缀实现sticky session的，也就是把全部后缀是tomat1的请求都发送给tomat1结点进行处理。

改动2：在<Engine/>中添加关于集群的配置

在tomcat官方关于tomcat集群配置的文档：http://tomcat.apache.org/tomcat-6.0-doc/cluster-howto.html 中，有一份默认配置：

<Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster"
         channelSendOptions="8">

  <Manager className="org.apache.catalina.ha.session.DeltaManager"
           expireSessionsOnShutdown="false"
           notifyListenersOnReplication="true"/>

  <Channel className="org.apache.catalina.tribes.group.GroupChannel">
    <Membership className="org.apache.catalina.tribes.membership.McastService"
                address="228.0.0.4"
                port="45564"
                frequency="500"
                dropTime="3000"/>
    <Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver"
              address="auto"
              port="4000"
              autoBind="100"
              selectorTimeout="5000"
              maxThreads="6"/>

    <Sender className="org.apache.catalina.tribes.transport.ReplicationTransmitter">
      <Transport className="org.apache.catalina.tribes.transport.nio.PooledParallelSender"/>
    </Sender>
    <Interceptor className="org.apache.catalina.tribes.group.interceptors.TcpFailureDetector"/>
    <Interceptor className="org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor"/>
  </Channel>

  <Valve className="org.apache.catalina.ha.tcp.ReplicationValve"
         filter=""/>
  <Valve className="org.apache.catalina.ha.session.JvmRouteBinderValve"/>

  <Deployer className="org.apache.catalina.ha.deploy.FarmWarDeployer"
            tempDir="/tmp/war-temp/"
            deployDir="/tmp/war-deploy/"
            watchDir="/tmp/war-listen/"
            watchEnabled="false"/>

  <ClusterListener className="org.apache.catalina.ha.session.JvmRouteSessionIDBinderListener"/>
  <ClusterListener className="org.apache.catalina.ha.session.ClusterSessionListener"/>
</Cluster>

这份默认配置能够知足大多数应用场景，所以，咱们只须要将这份配置复制到<Engine/>中，tomcat的配置就所有完成了。

4.2 配置apache
打开apache安装目录下的conf/httpd.conf文件，在文件最后追加如下内容：

# Load mod_jk module
LoadModule jk_module modules/mod_jk.so
# Specify jk log file.
JkLogFile /var/log/mod_jk.log
# Specify jk log level [debug/error/info]
JkLogLevel info
# Specify workers.properties, this file tell jk:
# how many nodes and where they are.
JkWorkersFile conf/workers.properties
# Specify which requests should handled by which node.
JkMount /* controller

关于mod_jk配置项的详细内容，可参考：http://tomcat.apache.org/connectors-doc/webserver_howto/apache.html
上述配置中：JkWorkersFile conf/workers.properties 指明由一个workers.properties文件来描述集群结点的状况，所以，咱们须要建立这个workers.properties文件，并放置于conf文件夹下，这个文件的内容以下：

#全部节点列表，其中controller是一个逻辑结点，负责负载均衡控制，
#若是JkMount中的URL指定给了controller就表示这个请求会被自动散列到某个物理节点上。
#注意：真正负责处理请求的tomcat的名称（这里就是tomcat1,tomcat2)必须于它们在conf/server.xml
#文件中配置的jvmRout的属性值是一致的！
worker.list = controller,tomcat1,tomcat2

#========tomcat1========
worker.tomcat1.port=6009       #ajp13 端口号，在tomcat下server.xml配置,默认8009
worker.tomcat1.host=localhost  #tomcat的主机地址，如不为本机，请填写ip地址
worker.tomcat1.type=ajp13
worker.tomcat1.lbfactor = 1    #server的加权比重，值越高，分得的请求越多
#========tomcat2========
worker.tomcat2.port=7009       #ajp13 端口号，在tomcat下server.xml配置,默认8009
worker.tomcat2.host=localhost  #tomcat的主机地址，如不为本机，请填写ip地址
worker.tomcat2.type=ajp13
worker.tomcat2.lbfactor = 1    #server的加权比重，值越高，分得的请求越多

#========controller,负载均衡控制器========
worker.controller.type=lb
worker.controller.balance_workers=tomcat1,tomcat2   #指定分担请求的tomcat，旧版本中的balanced_workers,已再也不推荐使用！
worker.controller.sticky_session=1 #sticky_session为1表示，
#当某一 client的session建立以后，后续由该客户端发起的请求，也就是这个session的全部请求都始终由第一次处理该请求的结点
#负责处理（除非该结点挂掉）

到此，全部配置均已完成，启动两个tomcat和apache后，将某一应用同时部署到两个tomcat中，经过apache访问这个应用，观察tomcat后台打出的日志会发现，请求被随机分配给了两个tomcat交替执行。 备注：应用程序要为集群所作的准备 1. 在应用程序的web.xml中须要加入：<distributable/>元素 2. session中存放的数据（如attribute）必须实现序列化。 参考资源： tomcat官方关于tomcat集群配置的文档： http://tomcat.apache.org/tomcat-6.0-doc/cluster-howto.html tomcat官方关于Apache Tomcat Connector的文档 http://tomcat.apache.org/connectors-doc/webserver_howto/apache.html apache官方关于apache的安装文档 http://httpd.apache.org/docs/2.2/en/install.html apache官方关于configure参数的文档 http://httpd.apache.org/docs/2.2/en/programs/configure.html#installationdirectories