NoSQL-Redis

介绍
Redis和Memcached相似，也属于k-v数据存储
Redis官网redis.io, 当前最新稳定版4.0.1
支持更多value类型，除了和string外，还支持hash、lists（链表）、sets（集合）和sorted sets（有序集合）
redis使用了两种文件格式：全量数据(RDB)和增量请求(aof)。全量数据格式是把内存中的数据写入磁盘，便于下次读取文件进行加载。增量请求文件则是把内存中的数据序列化为操做请求，用于读取文件进行replay获得数据，这种相似于mysql binlog。
redis的存储分为内存存储、磁盘存储和log文件三部分
.
安装
cd /usr/local/src/
wget http://download.redis.io/releases/redis-4.0.1.tar.gz
cd redis-4.0.1
make && make install
cp redis.conf /etc/redis.conf
vim /etc/redis.conf //修改以下配置
daemonize yes
logfile "/var/log/redis.log"
dir /data/redis_data/
appendonly yes
mkdir /data/redis_data
sysctl vm.overcommit_memory=1
echo never > /sys/kernel/mm/transparent_hugepage/enabled
redis-server /etc/redis.conf
.
Redis持久化
Redis提供了两种持久化的方式，分别是RDB（Redis DataBase）和AOF（Append Only File）
RDB，简而言之，就是在不一样的时间点，将redis存储的数据生成快照并存储到磁盘等介质上。
打开rdb，配置文件里：
save [秒数] [前述秒数内更改次数] 保存
AOF，则是换了一个角度来实现持久化，那就是将redis执行过的全部写指令记录下来，在下次redis从新启动时，只要把这些写指令从前到后再重复执行一遍，就能够实现数据恢复了。
打开aof，appendfsync [频率]
其实RDB和AOF两种方式也能够同时使用，在这种状况下，若是redis重启的话，则会优先采用AOF方式来进行数据恢复，这是由于AOF方式的数据恢复完整度更高。
若是你没有数据持久化的需求，也彻底能够关闭RDB和AOF方式，这样的话，redis将变成一个纯内存数据库，就像memcache同样。
save 900 1 #表示每15分钟且至少有1个key改变，就触发一次持久化 
save 300 10 #表示每5分钟且至少有10个key改变，就触发一次持久化
save 60 10000 #表示每60秒至少有10000个key改变，就触发一次持久
save “” #这样能够禁用rdb持久化
appendonly yes #若是是yes，则开启aof持久化
appendfilename “appendonly.aof” # 指定aof文件名字
appendfsync everysec #指定fsync()调用模式，有三种no(不调用fsync),always(每次写都会调用fsync),everysec(每秒钟调用一次fsync)。第一种最快，第二种数据最安全，但性能会差一些，第三种为这种方案，默认为第三种。

.
redis数据类型
string
string为最简单的类型，与Memcached同样的类型，一个key对应一个value，其支持的操做与Memcached的操做相似，它的功能更丰富。设置能够存二进制的对象。
list
list是一个链表结构，主要功能是push、pop、获取一个范围的全部值等等。操做中key理解为链表的名字。
使用 list 结构，咱们能够轻松地实现最新消息排行等功能（好比新浪微博的 TimeLine ）。list 的另外一个应用就是消息队列，能够利用 list 的 push操做，将任务存在 list 中，而后工做线程再用pop操做将任务取出进行执行。
set
set是集合，和咱们数学中的集合概念类似，对集合的操做有添加删除元素，有对多个集合求交并差等操做。操做中key理解为集合的名字。好比在微博应用中，能够将一个用户全部的关注人存在一个集合中，将其全部粉丝存在一个集合。由于 Redis 很是人性化的为集合提供了求交集、并集、差集等操做，那么就能够很是方便的实现如共同关注、共同喜爱、二度好友等功能，对上面的全部集合操做，你还可使用不一样的命令选择将结果返回给客户端仍是存集到一个新的集合中。
sort-set
sorted set是有序集合，它比set多了一个权重参数score，使得集合中的元素可以按 score 进行有序排列，好比一个存储全班同窗成绩的 Sorted Sets，其集合 value 能够是同窗的学号，而 score 就能够是其考试得分，这样在数据插入集合的时候，就已经进行了自然的排序。
hash
在 Memcached 中，咱们常常将一些结构化的信息打包成 hashmap，在客户端序列化后存储为一个字符串的值（通常是 JSON 格式），好比用户的昵称、年龄、性别、积分等。
.
redis经常使用操做
set key1 aminglinux
get key1
set key1 aming//第二次赋值会覆盖
setnx key2 aaa //返回1 若是key2不存在直接建立key
setnx key2 bbb //返回0，若是key2存在，返回0
setex key3 10 1 //给key3设置过时时间为10s，值为1，若key已经存在，会覆盖新的值
mset k1 1 k2 a k3 c
mget k1 k3 k2
lpush lista a //从左侧加入一个元素
lpush lista b
lrange lista 0 -1
lpop lista //从左侧取出第一个元素
rpush lista 1 //从右侧加入一个元素
rpop lista //从右侧取出第一个元素
linsert  lista  before  2 3  //在2的前面插入一个元素为3
lset lista 4 bbb  //把第5个元素修改成bbb
lindex lista 0  //查看第1个元素
lindex lista 3  //查看第4个元素
llen lista  //查看链表中有几个元素
sadd seta aaa  //向集合seta中放入元素
smembers seta   //查看集合中的全部元素
srem  seta    aaa //删除元素
spop  seta    //随机取出一个元素，删除
sdiff  seta  setb   //求差集，以seta为标准
sdiffstore setc seta setb   //求差集而且存储，存储到了setc里
sinter seta setb //求交集
sinterstore  setd seta setb  //将交集存储setd
sunion seta setb //求并集
sunionstore sete seta setb //求并集并存储到sete
sismember seta aaa  //判断一个元素是否属于一个集合
srandmember  seta //随机取出一个元素，但不删除
zadd zseta 11 123 //建立有序集合
zrange zseta 0 -1 //显示全部元素，按顺序显示
zrange zseta 0 -1 withscores //能够带上分值
zrem zseta 222 //删除指定元素
zrank zseta 222 //返回元素的索引值，索引值从0开始，按score正向排序
zrevrank zseta 222 //同上，不一样的是，按score反序排序
zrevrange zseta 0 -1 反序显示全部元素，并带分值
zcard zseta //返回集合中全部元素的个数
zcount zseta 1 10 // 返回分值范围1-10的元素个数
zrangebyscore zseta 1 10 // 返回分值范围1-10的元素
zremrangebyrank zseta 0 2 //删除索引范围0-2的元素，按score正向排序
zremrangebyscore zseta 1 10 //删除分值范围1-10的元素
hset user1  name aming  //创建hash
hset user1 age 30
hset user1 job  it
hgetall user1
hmset user2  name aming age 30  job it    //批量创建键值对
hmget user2
hmget user2 name age  job
hdel user2 job   //删除指定filed
hkeys user2  //打印全部的key
hvals user2 //打印全部的values
hlen user2  //查看hash有几个filed
keys * //取出全部key
keys my* //模糊匹配
exists name //有name键 返回1 ，不然返回0；
del key1 // 删除一个key //成功返回1 ，不然返回0；
EXPIRE key1 100 //设置key1 100s后过时
ttl key // 查看键 还有多长时间过时，单位是s,当 key 不存在时，返回 -2 。 当 key 存在但没有设置剩余生存时间时，返回 -1 。 不然，返回 key 的剩余生存时间。
select 0 //表明选择当前数据库，默认进入0 数据库
move age 1 // 把age 移动到1 数据库
persist key1 //取消key1的过时时间
randomkey //随机返回一个key
rename oldname newname //重命名key
type key1 //返回键的类型
dbsize  //返回当前数据库中key的数目
info  //返回redis数据库状态信息
flushdb //清空当前数据库中全部的键
flushall    //清空全部数据库中的全部的key
bgsave //保存数据到 rdb文件中，在后台运行
save //做用同上，可是在前台运行
config get * //获取全部配置参数
config get dir //获取配置参数
config set dir //更改配置参数
数据恢复： 首先定义或者肯定dir目录和dbfilename，而后把备份的rdb文件放到dir目录下面，重启redis服务便可恢复数据
.
redis安全设置
设置监听ip
bind 127.0.0.1 2.2.2.2//能够是多个ip，用空格分隔
设置监听端口
port 16000
设置密码
requirepass aming>com
redis-cli -a 'aming>com'
将config命令更名
rename-command CONFIG aming
禁掉config命令
rename-command CONFIG “”
.
慢查询日志
编辑配置文件/etc/redis.conf
针对慢查询日志，能够设置两个参数，一个是执行时长，单位是微秒，另外一个是慢查询日志的长度。当一个新的命令被写入日志时，最老的一条会从命令日志队列中被移除。
slowlog-log-slower-than 1000 //单位ms，表示慢于1000ms则记录日志
slowlog-max-len 128 //定义日志长度，表示最多存128条
如下为命令
slowlog get //列出全部的慢查询日志
slowlog get 2 //只列出2条
slowlog len //查看慢查询日志条数
.
php安装redis扩展模块
cd /usr/local/src
wget https://coding.net/u/aminglinux/p/yuanke_centos7/git/raw/master/21NOSQL/phpredis.zip
unzip phpredis.zip
cd phpredis-develop
/usr/local/php-fpm/bin/phpize
./configure --with-php-config=/usr/local/php-fpm/bin/php-config
make
make install
vim /usr/local/php.ini//增长extension=redis.so
/usr/local/php-fpm/bin/php -m|grep redis//看是否有redis模块
重启php-fpm服务

.
存储session
vim /usr/local/php-fpm/etc/php.ini//更改或增长
session.save_handler = "redis"
session.save_path = "tcp://127.0.0.1:6379"

或者apache虚拟主机配置文件中也能够这样配置：
php_value session.save_handler " redis" php_value session.save_path " tcp://127.0.0.1:6379" 

或者php-fpm配置文件对应的pool中增长：
php_value[session.save_handler] = redis
php_value[session.save_path] = " tcp://127.0.0.1:6379 "
wgt http://study.lishiming.net/.mem_se.txt
mv .mem_se.txt /usr/local/apache2/htdocs/session.php
其中session.php内容能够参考https://coding.net/u/aminglinux/p/yuanke_centos7/git/blob/master/21NOSQL/session.php
curl localhost/session.php //结果相似于1443702394<br><br>1443702394<br><br>i44nunao0g3o7vf2su0hnc5440
命令行链接redis，也能够查看到该key以及对应的值
若是想用php链接redis cluster，须要使用predis扩展
安装方法相似phpredis，predis扩展地址https://github.com/nrk/predis
.
主从配置
为了节省资源，咱们能够在一台机器上启动两个redis服务
cp /etc/redis.conf /etc/redis2.conf
vim /etc/redis2.conf //须要修改port,dir,pidfile,logfile
还要增长一行
slaveof 127.0.0.1 6379
若是主上设置了密码，还须要增长
masterauth aminglinux>com //设置主的密码
启动以前不要忘记建立新的dir目录
redis-server /etc/redis2.conf
测试：在主上建立新的key，在从上查看
注意：redis主从和mysql主从不同，redis主从不用事先同步数据，它会自动同步过去
.
redis集群
多个redis节点网络互联，数据共享
全部的节点都是一主一从（能够是多个从），其中从不提供服务，仅做为备用
不支持同时处理多个键（如mset/mget），由于redis须要把键均匀分布在各个节点上，并发量很高的状况下同时建立键值会下降性能并致使不可预测的行为。
支持在线增长、删除节点
客户端能够连任何一个主节点进行读写
场景设置：
两台机器，分别开启三个Redis服务(端口)
A机器上三个端口7000,7002,7004，所有为主
B机器上三个端口7001,7003,7005，所有为从
两台机器上都要编译安装redis,而后编辑并复制3个不一样的redis.conf，分别设置不一样的端口号、dir等参数，还须要增长cluster相关参数，而后分别启动6个redis服务
具体redis配置文件https://coding.net/u/aminglinux/p/yuanke_centos7/git/tree/master/21NOSQL 下载或者查看
安装ruby2.2 （只须要一台机器上运行）
yum -y groupinstall "Development Tools"
yum -y install gdbm-devel libdb4-devel libffi-devel libyaml libyaml-devel ncurses-devel openssl-devel readline-devel tcl-deve
cd /root/
mkdir -p rpmbuild/{BUILD,BUILDROOT,RPMS,SOURCES,SPECS,SRPMS}
wget http://cache.ruby-lang.org/pub/ruby/2.2/ruby-2.2.3.tar.gz -P rpmbuild/SOURCES
wget https://raw.githubusercontent.com/tjinjin/automate-ruby-rpm/master/ruby22x.spec -P rpmbuild/SPECS
rpmbuild -bb rpmbuild/SPECS/ruby22x.spec
yum -y localinstall rpmbuild/RPMS/x86_64/ruby-2.2.3-1.el7.centos.x86_64.rpm
gem install redis
cp /usr/local/src/redis-4.0.1/src/redis-trib.rb /usr/bin/
redis-trib.rb create --replicas 1 192.168.133.130:7000 192.168.133.130:7002 192.168.133.130:7004 192.168.133.132:7001 192.168.133.132:7003 192.168.133.132:7005
redis-cli -c -h 192.168.133.130 -p 7000//-c说明以集群的方式登陆
任意一个节点均可以建立key，或者查看key（演示）
redis-trib.rb check 192.168.133.130:7000//检测集群状态
cluster nodes//列出节点
cluster info//查看集群信息
cluster meet ip port //添加节点
cluster forget node_id //移除某个节点
cluster replicate node_id//将当前节点设置为指定节点的从
cluster saveconfig//保存配置文件