Redis从单机到集群，一步步教你环境部署以及使用

时间  2019-11-19
标签 redis 单机 集群 步步 环境 部署 以及 使用 栏目 Redis 繁體版
原文   原文链接

Redis做为缓存系统来讲仍是颇有价值的，在大数据方向里，也是须要有缓存系统的。通常能够考虑tachyon或者redis，因为redis安装以及使用更简单，因此仍是优先考虑了它。那么在一些场景下为了保证数据的可靠性，就须要采用集群的模式部署，所以本篇文章就基于Redis Cluster的背景讲解下部署以及后期的使用。html

大体会包括下面的内容：node

  • Redis单机版的安装以及验证
  • Redis集群版的安装以及验证
  • 使用图形化工具访问Redis
  • 使用Jedis访问Redis
  • 使用JedisCluster访问Redis Cluster

以后会介绍一下，如何在Spark中使用redis，敬请期待。linux

Redis单机版安装

1.1 下载

首先去官网下载想要的版本：
https://redis.io/downloadc++

我这里选了一个版本没那么高的，省的变化太大，各类软件兼容不了。因而挑个以前的稳定版本下载，下载redis-3.2.10.tar.gz拷贝到目标机器。git

1.2 安装

把压缩文件拷贝到指定的服务器上，执行解压命令：github

tar -zxvf redis-3.2.10.tar.gz

安装前须要先安装必要的包，yum -y install gcc gcc-c++ tcl，这里安装的都是通常遇到的错误所须要安装的库。redis

安装完后，进入redis-3.2.10目录，执行编译命令：make MALLOC=libc，这样就安装完了windows

1.3 测试

安装完能够直接启动测试一下：api

  • 启动服务器，执行下面的命令：./src/redis-server redis.conf
  • 启动客户端，执行下面的命令：./src/redis-cli

在控制台中，输入下面命令:缓存

set foo bar
get foo

看看是否正常

redis集群安装

按照上面的方式，在每台机器上面都装一下redis。因为redis cluster集群必需要三个master，若是作一个备份的话，就须要6个节点。因此我这里在三台机器上，安装redis，而后每台机器上启动两个redis便可。一会会说一下，如何在一台机器上，启动两个redis。

2.1 安装

首先安装一下ruby，由于集群的脚本是ruby版的

yum -y install ruby ruby-devel rubygems rpm-build

而后执行：

gem install redis

而后把redis-trip.rb拷贝到/usr/local/bin下，这样就能够在任何目录执行redis-trip命令了。

cp src/redis-trip.rb /usr/local/bin

2.2 修改配置

接下来须要根据集群的状况，建立server启动的配置了，先建立redis_cluster目录，拷贝redis.conf：

[root@localnode7 redis-3.2.10]# mkdir redis_cluster
[root@localnode7 redis-3.2.10]# cp redis.conf ./redis_cluster/redis.conf

而后修改redis.conf

[root@localnode7 redis-3.2.10]# vi ./redis_cluster/redis.conf

修改的内容有：

bind 0.0.0.0 //为了别人能访问，这里暴力的监听了全部的地址
port 6379
daemonize yes //redis后台运行
cluster-enabled yes //开启集群  把注释#去掉
cluster-config-file nodes_6379.conf //集群的配置  配置文件首次启动自动生成
cluster-node-timeout 15000 //请求超时  默认15秒，可自行设置
appendonly yes //这里跟redis持久化的机制有关系，有兴趣能够多关注一下redis的日志记录机制

PS：由于redis.conf配置文件比较大，内容不少。所以你们在修改配置的时候可使用vi的快捷键/想要搜索的内容，而后按enter,能够快速定位到想要修改的配置上，若是有多个，能够再用n键跳转到下一个匹配结果。

2.3 启动服务器

接下来就能够启动redis服务器

[root@localnode7 redis-3.2.10]# ./src/redis-server redis_cluster/redis.conf
[root@localnode7 redis-3.2.10]# ps -aux | grep redis
Warning: bad syntax, perhaps a bogus '-'? See /usr/share/doc/procps-3.2.8/FAQ
root     29361  0.0  0.0 130436  2452 ?        Ssl  13:21   0:00 ./src/redis-server 127.0.0.1:6379 [cluster]
root     29381  0.0  0.0 103464  1080 pts/0    R+   13:21   0:00 grep redis
[root@localnode7 redis-3.2.10]#

2.4 单个机器启动多个server

若是想要在一台机器上同时启动多个redis，能够直接再拷贝一份redis.conf，命名成redis2.conf，修改里面的port参数和cluster-config-file参数便可。

好比上面的配置修改为:

bind 0.0.0.0
port 6380  // <----只有这里发生变化
daemonize yes
cluster-enabled yes
cluster-config-file nodes_6380.conf // <--只有这里发生变化
cluster-node-timeout 15000
appendonly yes

而后启动的时候，指定为这个conf便可:

./src/redis-server redis_cluster/redis2.conf

再次查询启动进程：

[root@localnode4 redis-3.2.10]# ps -aux | grep redis
Warning: bad syntax, perhaps a bogus '-'? See /usr/share/doc/procps-3.2.8/FAQ
root      7452  0.0  0.0 131892  2984 ?        Ssl  15:59   0:08 ./src/redis-server 0.0.0.0:6379 [cluster]
root      9337  0.0  0.0 130564  2744 ?        Ssl  16:00   0:08 ./src/redis-server 0.0.0.0:6380 [cluster]
root     32298  0.0  0.0 103464  1084 pts/0    S+   19:27   0:00 grep redis
[root@localnode4 redis-3.2.10]#

2.5 建立集群

注意：

  • 想要搭建集群，至少6个节点，否则执行下面的命令会报错的
  • 在建立集群时，只能用ip地址，不能用主机名，否则会链接不上...不知道为啥...

执行下面的命令启动集群建立：

[root@localnode6 redis-3.2.10]# redis-trib.rb  create  --replicas 1 10.10.10.104:6379 10.10.10.106:6379 10.10.10.107:6379 10.10.10.104:6380 10.
10.10.106:6380 10.10.10.107:6380
>>> Creating cluster
>>> Performing hash slots allocation on 6 nodes...
Using 3 masters:
10.10.10.107:6379
10.10.10.106:6379
10.10.10.104:6379
Adding replica 10.10.10.106:6380 to 10.10.10.107:6379
Adding replica 10.10.10.107:6380 to 10.10.10.106:6379
Adding replica 10.10.10.104:6380 to 10.10.10.104:6379
M: e59449112f33dcb2dfad7a1ec32920470f589c32 10.10.10.104:6379
   slots:10923-16383 (5461 slots) master
M: 566762510d6b7b2e1b361a8a8d44e4a9d788a92f 10.10.10.106:6379
   slots:5461-10922 (5462 slots) master
M: 8984e7d3e53ddcec5dd59684f69a1976a4db33ef 10.10.10.107:6379
   slots:0-5460 (5461 slots) master
S: 8e222ceb6ad4a9ca48566bd467b0e1b6573c2fc0 10.10.10.104:6380
   replicates e59449112f33dcb2dfad7a1ec32920470f589c32
S: 0c9e17b5955be559a7edf2853bff02d7415ea72f 10.10.10.106:6380
   replicates 8984e7d3e53ddcec5dd59684f69a1976a4db33ef
S: a8e54df5776b412de65b904ac3928d0d308fdc15 10.10.10.107:6380
   replicates 566762510d6b7b2e1b361a8a8d44e4a9d788a92f
Can I set the above configuration? (type 'yes' to accept): yes
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join....
>>> Performing Cluster Check (using node 10.10.10.104:6379)
M: e59449112f33dcb2dfad7a1ec32920470f589c32 10.10.10.104:6379
   slots:10923-16383 (5461 slots) master
   1 additional replica(s)
M: 8984e7d3e53ddcec5dd59684f69a1976a4db33ef 10.10.10.107:6379
   slots:0-5460 (5461 slots) master
   1 additional replica(s)
S: a8e54df5776b412de65b904ac3928d0d308fdc15 10.10.10.107:6380
   slots: (0 slots) slave
   replicates 566762510d6b7b2e1b361a8a8d44e4a9d788a92f
M: 566762510d6b7b2e1b361a8a8d44e4a9d788a92f 10.10.10.106:6379
   slots:5461-10922 (5462 slots) master
   1 additional replica(s)
S: 0c9e17b5955be559a7edf2853bff02d7415ea72f 10.10.10.106:6380
   slots: (0 slots) slave
   replicates 8984e7d3e53ddcec5dd59684f69a1976a4db33ef
S: 8e222ceb6ad4a9ca48566bd467b0e1b6573c2fc0 10.10.10.104:6380
   slots: (0 slots) slave
   replicates e59449112f33dcb2dfad7a1ec32920470f589c32
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

中间须要咱们输入一个yes肯定主从的分配。经过日志就能够看到master和slave的一个分配状况，以及slot的分配。那个slots是跟存储的时候hash有关的，即一个字符串先要通过哈希，知道他应该存储到那个节点上，而后才会存储到对应的server中。当咱们用普通的api去查询的时候，须要查那个真正存储的机器，才能读取到数据。固然使用cluster api就不会有这个问题了。

2.6 集群环境验证

下面咱们验证下集群的效果：

首先查看一下集群的状态，而后建立一个key，再换另外一个节点登陆，看看可否查询到。

[root@localnode6 redis-3.2.10]# ./src/redis-cli -h 10.10.10.104 -c -p 6379
10.10.10.104:6379> cluster info
cluster_state:ok
cluster_slots_assigned:16384
cluster_slots_ok:16384
cluster_slots_pfail:0
cluster_slots_fail:0
cluster_known_nodes:6
cluster_size:3
cluster_current_epoch:6
cluster_my_epoch:1
cluster_stats_messages_sent:86
cluster_stats_messages_received:86
10.10.10.104:6379> get foo
(nil)
10.10.10.104:6379> set foo bar
OK
10.10.10.104:6379> get foo
"bar"
10.10.10.104:6379>
[root@localnode6 redis-3.2.10]# ./src/redis-cli -h 10.10.10.106 -c -p 6379
10.10.10.106:6379> get foo
-> Redirected to slot [12182] located at 10.10.10.104:6379
"bar"
10.10.10.104:6379>

这样咱们的集群环境就搭建完了。

万里长征又多走了一步~

安装监控软件

若是用windows办公，仍是有很多图形化的工具，能够链接redis的，好比redis desktop:

首先能够去下面网址去下载对应的版本：
https://redisdesktop.com/download

而后就是无脑安装了，安装完登陆到对应的机器上便可。不过貌似是单节点登陆，即你看不到集群的数据。多是我不会用 :-(

使用Jedis API访问Redis Cluster

首先在pom.xml中引入Jedis的jar包：

<dependency>
   <groupId>redis.clients</groupId>
   <artifactId>jedis</artifactId>
   <version>2.9.0</version>
</dependency>

而后测试一下：

public class JedisTest {
    public static void main(String[] args) {
        Jedis redis = new Jedis("10.10.10.104",6379);
        String foo = redis.get("foo");
        System.out.println(foo);
    }
｝

使用JedisCluster访问Redis Cluster

参考下这片文章就行，试验过了可用的：
http://www.cnblogs.com/shihaiming/p/5953956.html

参考

1 安装redis常常遇到的问题：http://www.cnblogs.com/HKUI/p/4439575.html 2 make的时候error: jemalloc/jemalloc.h报错：http://openskill.cn/article/151 3 linux经常使用目录介绍：http://www.linuxidc.com/Linux/2016-08/134701.htm 4 redis集群环境搭建：http://www.cnblogs.com/wuxl360/p/5920330.html 5 redis安装：http://www.runoob.com/redis/redis-install.html 6 redis官方文档:https://redis.io/download 7 redis client官方文档：https://github.com/uglide/RedisDesktopManager 8 redis desktop windows下载：https://redisdesktop.com/download

相关文章
相关标签/搜索
每日一句
    每一个你不满意的现在，都有一个你没有努力的曾经。
本站公众号
   欢迎关注本站公众号,获取更多信息
联系我们 最近搜索 最新文章 沪ICP备13005482号-10 MyBatis教程 SQL 教程 MySQL教程 Java 教程 Thymeleaf 教程 Hibernate教程 Spring教程 Redis教程