Spring Cloud（十一）高可用的分布式配置中心 Spring Cloud Bus 消息总线集成（RabbitMQ）

时间  2019-12-05
标签 spring cloud 十一 可用 分布式 配置 中心 bus 消息 总线 集成 rabbitmq 栏目 Spring 繁體版
原文   原文链接

上一篇文章，留了一个悬念,Config Client 实现配置的实时更新，咱们可使用 /refresh 接口触发，若是全部客户端的配置的更改，都须要手动触发客户端 /refresh ，当服务愈来愈多的时候，那岂不是维护成本很高，显然不太合适，而使用Spring Cloud Bus 消息总线实现方案，能够优雅的解决以上问题，那就是经过消息代理中间件RabbitMQ 加 Git的Webhooks來触发配置的更新，那具体是怎么实现的，我会经过图文形式介绍。node

Spring Cloud Bus

Spring Cloud Bus 将分布式系统的节点经过轻量级消息代理链接起来。用于在集群中传播状态更改（例如配置更改事件）或其余管理指令。Spring Cloud Bus 的一个核心思想是经过分布式的启动器对 Spring Boot 应用进行扩展，也能够用来创建一个或多个应用之间的通讯频道。目前惟一实现的方式是用 AMQP 消息代理做为通道，可是相同的基本功能集（还有一些取决于传输）在其余传输的路线图上git

消息总线

消息总线是一种通讯工具，能够在机器之间互相传输消息、文件等。消息总线扮演着一种消息路由的角色，拥有一套完备的路由机制来决定消息传输方向。发送段只须要向消息总线发出消息而不用管消息被如何转发。
Spring cloud bus 经过轻量消息代理链接各个分布的节点。管理和传播全部分布式项目中的消息，本质是利用了MQ的广播机制在分布式的系统中传播消息，目前经常使用的有Kafka和RabbitMQ 。
下面是一个配置中心刷新配置的例子github

架构图

[图片来源于网络若有侵权请私信删除]web

  • 一、提交代码触发post请求给bus/refresh
  • 二、server端接收到请求并发送给Spring Cloud Bus
  • 三、Spring Cloud bus接到消息并通知给其它客户端
  • 四、其它客户端接收到通知，请求Server端获取最新配置
  • 五、所有客户端均获取到最新的配置

消息代理

消息代理（Message Broker）是一种消息验证、传输、路由的架构模式。消息代理是一个中间件产品，它的核心是一个消息的路由程序，用来实现接收和分发消息，并根据设定好的消息处理流来转发给正确的应用。它包括独立的通讯和消息传递协议，可以实现组织内部和组织间的网络通讯。设计代理的目的就是为了可以从应用程序中传入消息，并执行一些特别的操做。spring

和组织间的网络通讯。设计代理的目的就是为了可以从应用程序中传入消息，并执行一些特别的操做。
现有的消息代理开源产品：json

  • ActiveMQ
  • Kafka
  • RabbitMQ
  • RocketMQ

目前Spring Cloud Bus 支持 RabbitMQ 和 Kafka，spring-cloud-starter-bus-amqp 、spring-cloud-starter-bus-kafkasegmentfault

RabbitMQ简介

RabbitMQ是一个开源的AMQP实现，服务器端用Erlang语言编写，支持多种客户端，如：Python、Ruby、.NET、Java、JMS、C、PHP、ActionScript、XMPP、STOMP等，支持AJAX。用于在分布式系统中存储转发消息，在易用性、扩展性、高可用性等方面表现不俗。浏览器

AMQP，即Advanced message Queuing Protocol，高级消息队列协议，是应用层协议的一个开放标准，为面向消息的中间件设计。消息中间件主要用于组件之间的解耦，消息的发送者无需知道消息使用者的存在，反之亦然。安全

AMQP的主要特征是面向消息、队列、路由（包括点对点和发布/订阅）、可靠性、安全。服务器

Github：https://github.com/rabbitmq
官网地址：http://www.rabbitmq.com

安装RabbitMQ

安装RabbitMQ 能够参考以前的文章

CentOs7.3 搭建 RabbitMQ 3.6 单机服务:
http://www.javashuo.com/article/p-hghklenn-mw.html

CentOs7.3 搭建 RabbitMQ 3.6 Cluster 集群服务:
http://www.javashuo.com/article/p-mlnirdgd-gc.html

Spring Boot 中使用 RabbitMQ:
http://www.javashuo.com/article/p-ckhyrgdn-d.html

准备工做

如下项目修改不作过多解释，部分代码再也不展现，请阅读上篇文章，Spring Cloud（十）高可用的分布式配置中心 Spring Cloud Config 中使用 Refresh：http://www.ymq.io/2017/12/23/spring-cloud-config-eureka-refresh/

把上一篇，示例代码下载，才能够进行一下的操做，下载地址在文章末尾

  • spring-cloud-eureka-service
  • spring-cloud-config-server
  • spring-cloud-eureka-provider-1
  • spring-cloud-eureka-provider-2
  • spring-cloud-eureka-provider-3
  • spring-cloud-feign-consumer

Config Server

在项目spring-cloud-config-server 进行如下操做

添加依赖

<dependency>
    <groupId>org.springframework.cloud</groupId>
    <artifactId>spring-cloud-starter-bus-amqp</artifactId>
</dependency>

添加配置

在 application.properties 添加如下配置.关闭安全认证

RabbitMQ 的 ymq用户是手动建立的，具体阅读上面 安装RabbitMQ 部分

#关闭刷新安全认证
management.security.enabled=false

spring.rabbitmq.host=192.168.252.126
spring.rabbitmq.port=5672
spring.rabbitmq.username=ymq
spring.rabbitmq.password=123456

Config Client

修改第上一篇文章项目

  • spring-cloud-eureka-provider-1
  • spring-cloud-eureka-provider-2
  • spring-cloud-eureka-provider-3

添加依赖

<dependency>
    <groupId>org.springframework.cloud</groupId>
    <artifactId>spring-cloud-starter-bus-amqp</artifactId>
</dependency>

添加配置

在 application.properties 添加如下配置.关闭安全认证

spring.rabbitmq.host=192.168.252.126
spring.rabbitmq.port=5672
spring.rabbitmq.username=ymq
spring.rabbitmq.password=123456

测试服务

启动RabbitMQ

启动MQ服务

$ service rabbitmq-server start
Redirecting to /bin/systemctl start  rabbitmq-server.service

查看MQ状态

$ service rabbitmq-server status
[root@node6 rabbitmq]# service rabbitmq-server status
Redirecting to /bin/systemctl status  rabbitmq-server.service
● rabbitmq-server.service - RabbitMQ broker
   Loaded: loaded (/usr/lib/systemd/system/rabbitmq-server.service; disabled; vendor preset: disabled)
   Active: active (running) since Fri 2017-12-29 17:44:10 CST; 9min ago
  Process: 2814 ExecStop=/usr/sbin/rabbitmqctl stop (code=exited, status=0/SUCCESS)
 Main PID: 2948 (beam)
   Status: "Initialized"
   CGroup: /system.slice/rabbitmq-server.service
           ├─2948 /usr/lib64/erlang/erts-8.0.3/bin/beam -W w -A 64 -P 1048576 -t 5000000 -stbt db -zdbbl 32000 -K true -- -root /usr/lib64/erlang -progname erl -- -home /var/lib/rabbitmq -- -pa /usr...
           ├─3131 /usr/lib64/erlang/erts-8.0.3/bin/epmd -daemon
           ├─3233 erl_child_setup 1024
           ├─3240 inet_gethost 4
           └─3241 inet_gethost 4

Dec 29 17:44:08 node6 rabbitmq-server[2948]: RabbitMQ 3.6.10. Copyright (C) 2007-2017 Pivotal Software, Inc.
Dec 29 17:44:08 node6 rabbitmq-server[2948]: ##  ##      Licensed under the MPL.  See http://www.rabbitmq.com/
Dec 29 17:44:08 node6 rabbitmq-server[2948]: ##  ##
Dec 29 17:44:08 node6 rabbitmq-server[2948]: ##########  Logs: /var/log/rabbitmq/rabbit@node6.log
Dec 29 17:44:08 node6 rabbitmq-server[2948]: ######  ##        /var/log/rabbitmq/rabbit@node6-sasl.log
Dec 29 17:44:08 node6 rabbitmq-server[2948]: ##########
Dec 29 17:44:08 node6 rabbitmq-server[2948]: Starting broker...
Dec 29 17:44:10 node6 rabbitmq-server[2948]: systemd unit for activation check: "rabbitmq-server.service"
Dec 29 17:44:10 node6 systemd[1]: Started RabbitMQ broker.
Dec 29 17:44:10 node6 rabbitmq-server[2948]: completed with 6 plugins.
[root@node6 rabbitmq]#

启动项目

按照顺序依次启动项目

  • spring-cloud-eureka-service
  • spring-cloud-config-server
  • spring-cloud-eureka-provider-1
  • spring-cloud-eureka-provider-2
  • spring-cloud-eureka-provider-3
  • spring-cloud-feign-consumer

启动该工程后，访问服务注册中心，查看服务是否都已注册成功：http://127.0.0.1:8761/

查看服务注册状况

Exchanges

检查 springCloudBus

任何发送到Fanout Exchange 的消息都会被转发到与该Exchange绑定(Binding)的全部springCloudBus 队列Queue上。

检查Queues

浏览器打开 ：http://192.168.252.128:15672/

检查 springCloudBus

修改配置

修改Git仓库配置，在 content=hello dev 后面加上 Spring Cloud Bus Test

修改git 仓库配置

查看 Config Server

经过 Postman 发送 GET 请求到：http://localhost:8888/springCloudConfig/dev/master 查看 Config Server 是不是最新的值

Config Server 已是新的值

查看 Config Client

命令窗口，经过curl http://127.0.0.1:9000/hello 访问服务，或者在浏览器访问http://127.0.0.1:9000/hello F5 刷新

发现没有获得最新的值

由于咱们没有主动触发Config Server bus/refresh接口

访问服务

刷新配置

经过 Postman 发送 POST请求到：http://localhost:8888/bus/refresh ，咱们能够看到如下内容：

注意是 PSOT 请求

访问：http://localhost:8888/bus/refresh

三个Config Client 客户端控制台，分别会打印如下内容意思就是，收到远程更新请求，config.client，KEYS 刷新, key 是 content

2017-12-29 18:38:49.023  INFO 28944 --- [jeTgrKRGzgj9g-1] o.s.cloud.bus.event.RefreshListener      : Received remote refresh request. Keys refreshed [config.client.version, content]
2017-12-29 18:38:49.025  INFO 28944 --- [nfoReplicator-0] com.netflix.discovery.DiscoveryClient    : DiscoveryClient_EUREKA-PROVIDER/localhost:eureka-provider:8081: registering service...
2017-12-29 18:38:49.035  INFO 28944 --- [nfoReplicator-0] com.netflix.discovery.DiscoveryClient    : DiscoveryClient_EUREKA-PROVIDER/localhost:eureka-provider:8081 - registration status: 204
2017-12-29 18:38:49.067  INFO 28944 --- [jeTgrKRGzgj9g-1] o.s.a.r.c.CachingConnectionFactory       : Created new connection: SpringAMQP#31e87320:0/SimpleConnection@39151d4e [delegate=amqp://ymq@192.168.252.126:5672/, localPort= 64885]

再次查看 Config Client

访问：http://localhost:8081/ ,http://localhost:8082/ ,http://localhost:8083/ 已经刷新了配置

访问服务

扩展阅读

Git webhooks

如今虽然能够不用重启服务就更新配置了，但仍是须要咱们手动操做，这样仍是不可取的。因此，这里就要用到Git的webhooks来达到自动更新配置。

打开git上配置仓库的地址，添加webhooks，上面Payload URL我写的域名，固然我没有部署，上面的Payload URL就填写咱们的配置中心触发刷新的地址，固然这里不能写localhost啦，要外网访问地址才行。

还有这里面有个Secret的秘钥验证，若是这里填写的话，在配置文件上要写上encrypt.key与之对应。

添加webhooks

局部刷新

某些场景下（例如灰度发布），咱们可能只想刷新部分微服务的配置，此时可经过/bus/refresh端点的destination参数来定位要刷新的应用程序。

例如：/bus/refresh?destination=customers:8000，这样消息总线上的微服务实例就会根据destination参数的值来判断是否须要要刷新。其中，customers:8000指的是各个微服务的ApplicationContext ID。

destination参数也能够用来定位特定的微服务。例如：/bus/refresh?destination=customers:**，这样就能够触发customers微服务全部实例的配置刷新。

跟踪总线事件

一些场景下，咱们可能但愿知道Spring Cloud Bus事件传播的细节。此时，咱们能够跟踪总线事件（RemoteApplicationEvent的子类都是总线事件）。

跟踪总线事件很是简单，只需设置spring.cloud.bus.trace.enabled=true，这样在/bus/refresh端点被请求后，访问/trace端点就可得到相似以下的结果：

发送 GET请求到：http://localhost:8888/trace

[
    {
        "timestamp": 1514543931362,
        "info": {
            "method": "GET",
            "path": "/eureka-provider/dev/master",
            "headers": {
                "request": {
                    "accept": "application/json, application/*+json",
                    "user-agent": "Java/1.8.0_112",
                    "host": "localhost:8888",
                    "connection": "keep-alive"
                },
                "response": {
                    "X-Application-Context": "config-server:8888",
                    "Content-Type": "application/json;charset=UTF-8",
                    "Transfer-Encoding": "chunked",
                    "Date": "Fri, 29 Dec 2017 10:38:51 GMT",
                    "status": "200"
                }
            },
            "timeTaken": "6002"
        }
    },
    {
        "timestamp": 1514543927451,
        "info": {
            "method": "GET",
            "path": "/eureka-provider/dev/master",
            "headers": {
                "request": {
                    "accept": "application/json, application/*+json",
                    "user-agent": "Java/1.8.0_112",
                    "host": "localhost:8888",
                    "connection": "keep-alive"
                },
                "response": {
                    "X-Application-Context": "config-server:8888",
                    "Content-Type": "application/json;charset=UTF-8",
                    "Transfer-Encoding": "chunked",
                    "Date": "Fri, 29 Dec 2017 10:38:47 GMT",
                    "status": "200"
                }
            },
            "timeTaken": "4927"
        }
    },
    {
        "timestamp": 1514543925254,
        "info": {
            "method": "GET",
            "path": "/eureka-provider/dev/master",
            "headers": {
                "request": {
                    "accept": "application/json, application/*+json",
                    "user-agent": "Java/1.8.0_112",
                    "host": "localhost:8888",
                    "connection": "keep-alive"
                },
                "response": {
                    "X-Application-Context": "config-server:8888",
                    "Content-Type": "application/json;charset=UTF-8",
                    "Transfer-Encoding": "chunked",
                    "Date": "Fri, 29 Dec 2017 10:38:45 GMT",
                    "status": "200"
                }
            },
            "timeTaken": "2862"
        }
    },
    {
        "timestamp": 1514543923565,
        "info": {
            "method": "POST",
            "path": "/bus/refresh",
            "headers": {
                "request": {
                    "cache-control": "no-cache",
                    "postman-token": "0e497ec1-0c03-4dc2-bb61-ce2a266227d3",
                    "user-agent": "PostmanRuntime/7.1.1",
                    "accept": "*/*",
                    "host": "127.0.0.1:8888",
                    "accept-encoding": "gzip, deflate",
                    "content-length": "0",
                    "connection": "keep-alive"
                },
                "response": {
                    "X-Application-Context": "config-server:8888",
                    "status": "200"
                }
            },
            "timeTaken": "6616"
        }
    }
]

源码下载

GitHub：https://github.com/souyunku/spring-cloud-examples/tree/master/spring-cloud-config-bus-rabbitMQ

码云：https://gitee.com/souyunku/spring-cloud-examples/tree/master/spring-cloud-config-bus-rabbitMQ

Contact

  • 做者：鹏磊
  • 出处：http://www.ymq.io
  • Email：admin@souyunku.com
  • 版权归做者全部，转载请注明出处
  • Wechat：关注公众号，搜云库，专一于开发技术的研究与知识分享

关注公众号-搜云库

相关文章
相关标签/搜索
每日一句
    每一个你不满意的现在，都有一个你没有努力的曾经。
本站公众号
   欢迎关注本站公众号,获取更多信息
联系我们 最近搜索 最新文章 沪ICP备13005482号-10 MyBatis教程 SQL 教程 MySQL教程 Java 教程 Thymeleaf 教程 Hibernate教程 Spring教程 Redis教程