「实战篇」开源项目docker化运维部署-后端java部署（七）

时间  2019-11-17
标签 实战 开源 项目 docker 部署 后端 java 栏目 Docker 繁體版
原文   原文链接

本节主要说说后端的部署须要注意的点，自己renren-fast这个项目就是经过springboot来进行开发的，springboot内置的有tomcat因此，我们不用在容器内安装tomcat，直接用jar文件来进行运行。源码： github.com/limingios/n…后端/ 后端双机热备 gitee.com/renrenio/re…

spring boot

  • 如何配置redis集群
以前配置的redis集群，修改下单节点的吧，把全部的redis集群都放上去。 
spring:
    # 环境 dev|test|prod
    profiles:
        active: dev
    # jackson时间格式化
    jackson:
        time-zone: GMT+8
        date-format: yyyy-MM-dd HH:mm:ss
    http:
        multipart:
            max-file-size: 100MB
            max-request-size: 100MB
            enabled: true
    redis:
        open: false  # 是否开启redis缓存 true开启 false关闭
        database: 0
        #host: localhost
        #port: 6379
        #password: # 密码（默认为空）
        timeout: 6000  # 链接超时时长（毫秒）
        cluster:
          nodes:
          - 172.19.0.2:6379
          - 172.19.0.3:6379
          - 172.19.0.4:6379
          - 172.19.0.5:6379
          - 172.19.0.6:6379
          - 172.19.0.7:6379
        pool:
            max-active: 1000  # 链接池最大链接数（使用负值表示没有限制）
            max-wait: -1      # 链接池最大阻塞等待时间（使用负值表示没有限制）
            max-idle: 10      # 链接池中的最大空闲链接
            min-idle: 5       # 链接池中的最小空闲链接复制代码
  • maven打包工程
renren-fast 包含了tomcat.jar文件，准确的来讲是springboot的maven，pom中自带的tomcat。因此打包成jar包能够独立运行文件


注意：java后台程序不使用虚拟网络，直接使用宿主的ip端口。--net=host
  • 运行java容器部署后端项目 <j1的后台> 
docker volume create j1
#查看j1所在的路径，方便jar包上传
docker volume  inspect j1
docker run -it -d name j1 -v j1:/home/soft --net=host java
docker exec -it j1 bash
#将编译好的jar拷贝到宿主机上j1所在的目录下 nohubp 就是后台挂机项目
nohup java -jar  /home/soft/renren-fast.jar复制代码
  • 运行java容器部署后端项目 <j2的后台> 
docker volume create j2
#查看j2所在的路径，方便jar包上传
docker volume  inspect j2
docker run -it -d name j2 -v j2:/home/soft --net=host java
docker exec -it j2 bash
#将编译好的jar拷贝到宿主机上j2所在的目录下 nohubp 就是后台挂机项目
nohup java -jar  /home/soft/renren-fast.jar复制代码
  • 运行java容器部署后端项目 <j3的后台> 
docker volume create j3
#查看j3所在的路径，方便jar包上传
docker volume  inspect j3
docker run -it -d name j3 -v j3:/home/soft --net=host java
docker exec -it j3 bash
#将编译好的jar拷贝到宿主机上j3所在的目录下 nohubp 就是后台挂机项目
nohup java -jar  /home/soft/renren-fast.jar复制代码

设置负载均衡

全部的负载都发送到一个jar包上，若是量比较大，tomcat最大承受500的并发，Tomcat可能就挂了。

  • nginx
nginx 是性能很是出色的反向代理服务器，最大能够支持8万/秒的并发访问，以前我们数据库中间件和redis中间件使用了haproxy，由于haproxy对tcp这种负载均衡作的比较好，如今java容器内的tomcat是支持的http的协议，http负载作的最好的是nginx，咱们选择nginx负载均衡的产品。
  • nginx的配置<n1>
定义了一个upstream tomcat内置的都是宿主机器的ip和端口，经过端口的映射找到对应的容器，在server中配置好tomcat的和nginx的端口，直接访问nginx，进行跳转到对应的java容器上。端口6101 

user  nginx;
worker_processes  1;

error_log  /var/log/nginx/error.log warn;
pid        /var/run/nginx.pid;


events {
    worker_connections  1024;
}


http {
    include       /etc/nginx/mime.types;
    default_type  application/octet-stream;

    log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
                      '$status $body_bytes_sent "$http_referer" '
                      '"$http_user_agent" "$http_x_forwarded_for"';

    access_log  /var/log/nginx/access.log  main;

    sendfile        on;
    #tcp_nopush on;

    keepalive_timeout  65;

    #gzip on;
    
    proxy_redirect          off;
    proxy_set_header        Host $host;
    proxy_set_header        X-Real-IP $remote_addr;
    proxy_set_header        X-Forwarded-For $proxy_add_x_forwarded_for;
    client_max_body_size    10m;
    client_body_buffer_size   128k;
    proxy_connect_timeout   5s;
    proxy_send_timeout      5s;
    proxy_read_timeout      5s;
    proxy_buffer_size        4k;
    proxy_buffers           4 32k;
    proxy_busy_buffers_size  64k;
    proxy_temp_file_write_size 64k;
    
    upstream tomcat {
        server 192.168.66.100:6001;
        server 192.168.66.100:6002;
        server 192.168.66.100:6003;
    }
    server {
        listen       6101;
        server_name  192.168.66.100; 
        location / {  
            proxy_pass   http://tomcat;
            index  index.html index.htm;  
        }  

    }
}复制代码
  • 建立nginx的指令<n1>
nginx使用宿主的主机ip。--net=host 
# 容器内的nginx启动加载容器外的配置文件
docker run -it -d --name n1 -v /root/v1/nginx.conf:/etc/nginx/nginx.conf --net=host --privileged nginx复制代码
  • nginx的配置<n2>
端口6102 
user  nginx;
worker_processes  1;

error_log  /var/log/nginx/error.log warn;
pid        /var/run/nginx.pid;


events {
    worker_connections  1024;
}


http {
    include       /etc/nginx/mime.types;
    default_type  application/octet-stream;

    log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
                      '$status $body_bytes_sent "$http_referer" '
                      '"$http_user_agent" "$http_x_forwarded_for"';

    access_log  /var/log/nginx/access.log  main;

    sendfile        on;
    #tcp_nopush on;

    keepalive_timeout  65;

    #gzip on;
    
    proxy_redirect          off;
    proxy_set_header        Host $host;
    proxy_set_header        X-Real-IP $remote_addr;
    proxy_set_header        X-Forwarded-For $proxy_add_x_forwarded_for;
    client_max_body_size    10m;
    client_body_buffer_size   128k;
    proxy_connect_timeout   5s;
    proxy_send_timeout      5s;
    proxy_read_timeout      5s;
    proxy_buffer_size        4k;
    proxy_buffers           4 32k;
    proxy_busy_buffers_size  64k;
    proxy_temp_file_write_size 64k;
    
    upstream tomcat {
        server 192.168.66.100:6001;
        server 192.168.66.100:6002;
        server 192.168.66.100:6003;
    }
    server {
        listen       6102;
        server_name  192.168.66.100; 
        location / {  
            proxy_pass   http://tomcat;
            index  index.html index.htm;  
        }  

    }
}复制代码
  • 建立nginx的指令<n2>
nginx使用宿主的主机ip。--net=host 
# 容器内的nginx启动加载容器外的配置文件
docker run -it -d --name n2 -v /root/v2/nginx.conf:/etc/nginx/nginx.conf --net=host --privileged nginx复制代码

后端项目的双机热备负载均衡方案

以前已经设置了n1 和n2，均可以正常的访问后端，可是没有设置keepalived，他们以前没法争抢ip，没法作到双机热备。此次说说双机热备。

进入容器n1而后安装keepalived
keepalived必须在n1所在的容器以内，也能够在docker仓库里面下载一个nginx-keepalived的镜像。这里直接在容器内安装keepalived。 
docker exec -it n1 /bin/bash
#写入dns，防止apt-get update找不到服务器
echo "nameserver 8.8.8.8" | tee /etc/resolv.conf > /dev/null 
apt-get clean
apt-get update
apt-get install vim
vi /etc/apt/sources.list复制代码
sources.list 添加下面的内容 
deb http://mirrors.163.com/ubuntu/ precise main universe restricted multiverse 
deb-src http://mirrors.163.com/ubuntu/ precise main universe restricted multiverse 
deb http://mirrors.163.com/ubuntu/ precise-security universe main multiverse restricted 
deb-src http://mirrors.163.com/ubuntu/ precise-security universe main multiverse restricted 
deb http://mirrors.163.com/ubuntu/ precise-updates universe main multiverse restricted 
deb http://mirrors.163.com/ubuntu/ precise-proposed universe main multiverse restricted 
deb-src http://mirrors.163.com/ubuntu/ precise-proposed universe main multiverse restricted 
deb http://mirrors.163.com/ubuntu/ precise-backports universe main multiverse restricted 
deb-src http://mirrors.163.com/ubuntu/ precise-backports universe main multiverse restricted 
deb-src http://mirrors.163.com/ubuntu/ precise-updates universe main multiverse restricted复制代码

  • 更新apt源 
apt-get clean
apt-get update
apt-get install keepalived
apt-get install vim复制代码

  • keepalived配置文件
容器内的路径：/etc/keepalived/keepalived.conf 
vi /etc/keepalived/keepalived.conf复制代码
keepalived.conf 
vrrp_instance VI_1 {
    state MASTER
    interface ens33
    virtual_router_id 51
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 123456
    }
    virtual_ipaddress {
        192.168.66.151
    }
}
virtual_server 192.168.66.151 6201 {
    delay_loop 3
    lb_algo rr
    lb_kind NAT
    persistence_timeout 50
    protocol TCP
    real_server 192.168.66.100 6101 {
        weight 1
    }
}复制代码
  1. VI_1 名称能够自定义
  2. state MASTER | keepalived的身份（MASTER主服务器，BACKUP备份服务器，不会抢占虚拟机ip）。若是都是主MASTER的话，就会进行互相争抢IP，若是抢到了就是MASTER，另外一个就是SLAVE。
  3. interface网卡，定义一个虚拟IP定义到那个网卡上边。网卡设备的名称。eth33是宿主机是网卡。
  4. virtual_router_id 51 | 虚拟路由标识，MASTER和BACKUP的虚拟路由标识必须一致。标识能够是0-255。
  5. priority 100 | 权重。MASTER权重要高于BACKUP 数字越大优选级越高。能够根据硬件的配置来完成，权重最大的获取抢到的级别越高。
  6. advert_int 1 | 心跳检测。MASTER与BACKUP节点间同步检查的时间间隔，单位为秒。主备之间必须一致。
  7. authentication | 主从服务器验证方式。主备必须使用相同的密码才能正常通讯。进行心跳检测须要登陆到某个主机上边全部有帐号密码。
  8. virtual_ipaddress | 虚拟ip地址，能够设置多个虚拟ip地址，每行一个。根据上边配置的eth33上配置的ip。192.168.66.151 是本身定义的虚拟ip
  • 启动keeplived
容器内启动 
service keepalived start复制代码

image
进入容器n2而后安装keepalived
keepalived必须在n2所在的容器以内，也能够在docker仓库里面下载一个nginx-keepalived的镜像。这里直接在容器内安装keepalived。 
docker exec -it n2 /bin/bash
#写入dns，防止apt-get update找不到服务器
echo "nameserver 8.8.8.8" | tee /etc/resolv.conf > /dev/null 
apt-get clean
apt-get update
apt-get install vim
vi /etc/apt/sources.list复制代码
sources.list 添加下面的内容 
deb http://mirrors.163.com/ubuntu/ precise main universe restricted multiverse 
deb-src http://mirrors.163.com/ubuntu/ precise main universe restricted multiverse 
deb http://mirrors.163.com/ubuntu/ precise-security universe main multiverse restricted 
deb-src http://mirrors.163.com/ubuntu/ precise-security universe main multiverse restricted 
deb http://mirrors.163.com/ubuntu/ precise-updates universe main multiverse restricted 
deb http://mirrors.163.com/ubuntu/ precise-proposed universe main multiverse restricted 
deb-src http://mirrors.163.com/ubuntu/ precise-proposed universe main multiverse restricted 
deb http://mirrors.163.com/ubuntu/ precise-backports universe main multiverse restricted 
deb-src http://mirrors.163.com/ubuntu/ precise-backports universe main multiverse restricted 
deb-src http://mirrors.163.com/ubuntu/ precise-updates universe main multiverse restricted复制代码

  • 更新apt源 
apt-get clean
apt-get update
apt-get install keepalived
apt-get install vim复制代码

  • keepalived配置文件
容器内的路径：/etc/keepalived/keepalived.conf 
vi /etc/keepalived/keepalived.conf复制代码
keepalived.conf 
vrrp_instance VI_1 {
    state MASTER
    interface ens33
    virtual_router_id 51
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 123456
    }
    virtual_ipaddress {
        192.168.66.151
    }
}
virtual_server 192.168.66.151 6201 {
    delay_loop 3
    lb_algo rr
    lb_kind NAT
    persistence_timeout 50
    protocol TCP
    real_server 192.168.66.100 6101 {
        weight 1
    }
}复制代码
  1. VI_1 名称能够自定义
  2. state MASTER | keepalived的身份（MASTER主服务器，BACKUP备份服务器，不会抢占虚拟机ip）。若是都是主MASTER的话，就会进行互相争抢IP，若是抢到了就是MASTER，另外一个就是SLAVE。
  3. interface网卡，定义一个虚拟IP定义到那个网卡上边。网卡设备的名称。eth33是宿主机是网卡。
  4. virtual_router_id 51 | 虚拟路由标识，MASTER和BACKUP的虚拟路由标识必须一致。标识能够是0-255。
  5. priority 100 | 权重。MASTER权重要高于BACKUP 数字越大优选级越高。能够根据硬件的配置来完成，权重最大的获取抢到的级别越高。
  6. advert_int 1 | 心跳检测。MASTER与BACKUP节点间同步检查的时间间隔，单位为秒。主备之间必须一致。
  7. authentication | 主从服务器验证方式。主备必须使用相同的密码才能正常通讯。进行心跳检测须要登陆到某个主机上边全部有帐号密码。
  8. virtual_ipaddress | 虚拟ip地址，能够设置多个虚拟ip地址，每行一个。根据上边配置的eth33上配置的ip。192.168.66.151 是本身定义的虚拟ip
  • 启动keeplived
容器内启动 
service keepalived start复制代码


PS：到此未知后端的nginx双负载，双热备方案已经实现了，

相关文章
相关标签/搜索
每日一句
    每一个你不满意的现在，都有一个你没有努力的曾经。
本站公众号
   欢迎关注本站公众号,获取更多信息
联系我们 最近搜索 最新文章 沪ICP备13005482号-10 MyBatis教程 SQL 教程 MySQL教程 Java 教程 Thymeleaf 教程 Hibernate教程 Spring教程 Redis教程