Redis概述:
redis
是一个基于Key-Value的持久化数据库存储,支持丰富的数据类型,用C语言编写,可基于内存又可持久化的日志型、Key-Value数据库,并提供多种语言的API
算法
Redis特色
数据库
一、Key-Value健值类型存储缓存
二、支持数据可靠存储及落地
安全
三、单进程单线程高性能服务器
服务器
四、单机qps(每秒查询率)能够达到10w
app
五、适合小数据量高速读写访问
less
Redis跟Memached的不一样dom
一、Redis能够持久化数据存储
异步
二、性能高很,Redis能支持超过10W每秒的读写频率
三、丰富的数据类型,Redis支持二进制的String、Lists、Hashes、Sets及sorted Sets(有序集合)等数据类型操做
四、Redis的全部操做都是原子性的
五、支持发布订阅功能
六、支持异步主从复制
【主从生产环境配置文件】
Master配置文件
daemonize yes
pidfile /ryzc/redis/redis.pid
port 30000
timeout 0
databases 16
maxclients 10000
dir /ryzc/redis/
syslog-enabled no
slowlog-log-slower-than -1
appendonly no
auto-aof-rewrite-percentage 0
requirepass kik4asfljweiojlsfjlasjfc56uhj75Ojdw2fdf
Slave配置文件
daemonize yes
pidfile /ryzc/redis/redis.pid
port 90022
timeout 0
databases 16
maxclients 10000
dir /ryzc/redis/
syslog-enabled no
slowlog-log-slower-than -1
appendonly no
auto-aof-rewrite-percentage 0
requirepass kik4asfljweiojlsfjlasjfc56uhj75Ojdw2fdf
masterauth kik4asfljweiojlsfjlasjfc56uhj75Ojdw2fdf
slaveof 127.0.0.1 30000
【配置文件解析】
1. Redis默认不是以守护进程的方式运行,能够经过该配置项修改,使用yes启用守护进程
daemonize no
2. 当Redis以守护进程方式运行时,Redis默认会把pid写入/var/run/redis.pid文件,能够经过pidfile指定
pidfile /var/run/redis.pid
3. 指定Redis监听端口,默认端口为6379,做者在本身的一篇博文中解释了为何选用6379做为默认端口,由于6379在手机按键上MERZ对应的号码,而MERZ取自意大利歌女Alessia Merz的名字
port 6379
4. 绑定的主机地址
bind 127.0.0.1
5.当 客户端闲置多长时间后关闭链接,若是指定为0,表示关闭该功能
timeout 300
6. 指定日志记录级别,Redis总共支持四个级别:debug、verbose、notice、warning,默认为verbose
loglevel verbose
debug:很详细的信息,适合开发和测试
verbose:包含许多不太有用的信息,但比debug要清爽一些
notice:比较适合生产环境
warning:警告信息
7. 日志记录方式,默认为标准输出,若是配置Redis为守护进程方式运行,而这里又配置为日志记录方式为标准输出,则日志将会发送给/dev/null
logfile stdout
8. 设置数据库的数量,默认数据库为0,可使用SELECT <dbid>命令在链接上指定数据库id
databases 16
9. 指定在多长时间内,有多少次更新操做,就将数据同步到数据文件,能够多个条件配合
save <seconds> <changes>
Redis默认配置文件中提供了三个条件:
save 900 1
save 300 10
save 60 10000
分别表示900秒(15分钟)内有1个更改,300秒(5分钟)内有10个更改以及60秒内有10000个更改。
# 过了900秒而且有1个key发生了改变 就会触发save动做
# 过了300秒而且有10个key发生了改变 就会触发save动做
# 过了60秒而且至少有10000个key发生了改变 也会触发save动做
10. 指定存储至本地数据库时是否压缩数据,默认为yes,Redis采用LZF压缩,若是为了节省CPU时间,能够关闭该选项,但会致使数据库文件变的巨大
rdbcompression yes
11. 指定本地数据库文件名,默认值为dump.rdb,数据会被持久化到这个目录下的‘dbfilename’指定的文件中。
dbfilename dump.rdb
12. 指定本地数据库存放目录,这里指定的必须是目录而不能是文件。
dir ./
13. 设置当本机为slav服务时,设置master服务的IP地址及端口,在Redis启动时,它会自动从master进行数据同步
slaveof <masterip> <masterport>
14. 当master服务设置了密码保护时,slav服务链接master的密码
masterauth <master-password>
15. 设置Redis链接密码,若是配置了链接密码,客户端在链接Redis时须要经过AUTH <password>命令提供密码,默认关闭
requirepass foobared
16. 设置同一时间最大客户端链接数,默认无限制,Redis能够同时打开的客户端链接数为Redis进程能够打开的最大文件描述符数,若是设置 maxclients 0,表示不做限制。当客户端链接数到达限制时,Redis会关闭新的链接并向客户端返回max number of clients reached错误信息
maxclients 128
17. 指定Redis最大内存限制,Redis在启动时会把数据加载到内存中,达到最大内存后,Redis会先尝试清除已到期或即将到期的Key,当此方法处理 后,仍然到达最大内存设置,将没法再进行写入操做,但仍然能够进行读取操做。Redis新的vm机制,会把Key存放内存,Value会存放在swap区
maxmemory <bytes>
18. 指定是否在每次更新操做后进行日志记录,Redis在默认状况下是异步的把数据写入磁盘,若是不开启,可能会在断电时致使一段时间内的数据丢失。由于 redis自己同步数据文件是按上面save条件来同步的,因此有的数据会在一段时间内只存在于内存中。默认为no
appendonly no
19. 指定更新日志文件名,默认为appendonly.aof
appendfilename appendonly.aof
20. 指定更新日志条件,共有3个可选值:
no:表示等操做系统进行数据缓存同步到磁盘(快)
always:表示每次更新操做后手动调用fsync()将数据写到磁盘(慢,安全)
everysec:表示每秒同步一次(折衷,默认值)
appendfsync everysec
21. 指定是否启用虚拟内存机制,默认值为no,简单的介绍一下,VM机制将数据分页存放,由Redis将访问量较少的页即冷数据swap到磁盘上,访问多的页面由磁盘自动换出到内存中(在后面的文章我会仔细分析Redis的VM机制)
vm-enabled no
22. 虚拟内存文件路径,默认值为/tmp/redis.swap,不可多个Redis实例共享
vm-swap-file /tmp/redis.swap
23. 将全部大于vm-max-memory的数据存入虚拟内存,不管vm-max-memory设置多小,全部索引数据都是内存存储的(Redis的索引数据 就是keys),也就是说,当vm-max-memory设置为0的时候,实际上是全部value都存在于磁盘。默认值为0
vm-max-memory 0
24. Redis swap文件分红了不少的page,一个对象能够保存在多个page上面,但一个page上不能被多个对象共享,vm-page-size是要根据存储的 数据大小来设定的,做者建议若是存储不少小对象,page大小最好设置为32或者64bytes;若是存储很大大对象,则可使用更大的page,若是不 肯定,就使用默认值
vm-page-size 32
25. 设置swap文件中的page数量,因为页表(一种表示页面空闲或使用的bitmap)是在放在内存中的,,在磁盘上每8个pages将消耗1byte的内存。
vm-pages 134217728
26. 设置访问swap文件的线程数,最好不要超过机器的核数,若是设置为0,那么全部对swap文件的操做都是串行的,可能会形成比较长时间的延迟。默认值为4
vm-max-threads 4
27. 设置在向客户端应答时,是否把较小的包合并为一个包发送,默认为开启
glueoutputbuf yes
28. 指定在超过必定的数量或者最大的元素超过某一临界值时,采用一种特殊的哈希算法
hash-max-zipmap-entries 64
hash-max-zipmap-value 512
29. 指定是否激活重置哈希,默认为开启(后面在介绍Redis的哈希算法时具体介绍)
activerehashing yes
30. 指定包含其它的配置文件,能够在同一主机上多个Redis实例之间使用同一份配置文件,而同时各个实例又拥有本身的特定配置文件
include /path/to/local.conf
31. 'syslog-enabled'设置为yes会把日志输出到系统日志,默认是no
syslog-enabled no
32. 指定syslog的标示符,若是'syslog-enabled'是no,则这个选项无效。
syslog-ident redis
33. 指定syslog 设备(facility), 必须是user或者local0到local7.
syslog-facility local
34. 复制冗余
Master-Slave replication. 使用slaveof把一个 Redis 实例设置成为另外一个Redis server的从库(热备). 注意: #配置只对当前slave有效。
所以能够把某个slave配置成使用不一样的时间间隔来保存数据或者监听其余端口等等。
命令格式:
slaveof <masterip> <masterport>
若是master有密码保护,则在slave与master进行数据同步以前须要进行密码校验,不然master会拒绝slave的请#求。
masterauth <master-password>
当slave丢失与master的链接时,或者slave仍然在于master进行数据同步时(尚未与master保持一致),#slave能够有两种方式来响应客户端请求:
1) 若是 slave-serve-stale-data 设置成 'yes' (the default) slave会仍然响应客户端请求,此时可能会有问题。
2) 若是 slave-serve-stale data设置成 'no' slave会返回"SYNC with master in progress"这样的错误信息。 但 INFO 和SLAVEOF命令除外。
slave-serve-stale-data yes
35. 命令重命名,将get命令改为wget命令
rename-command get wget
36. 一样能够经过把一个命令重命名为空串来完全kill掉这个命令,屏蔽set命令,好比:
rename-command set ""
37. 最大可以使用内存。若是超过,Redis会试图删除EXPIRE集合中的keys,具体作法是:Redis会试图释放即将过时的#keys,而保护还有很长生命周期的keys。
若是这样还不行,Redis就会报错,但像GET之类的查询请求仍是会获得响应。
警告:若是你想把Redis视为一个真正的DB的话,那不要设置<maxmemory>,只有你只想把Redis做为cache或者
有状态的server('state' server)时才须要设置。
maxmemory <bytes>
内存清理策略:若是达到了maxmemory,你能够采起以下动做:
volatile-lru -> 使用LRU算法来删除过时的set
allkeys-lru -> 删除任何遵循LRU算法的key
volatile-random ->随机地删除过时set中的key
allkeys->random -> 随机地删除一个key
volatile-ttl -> 删除最近即将过时的key(the nearest expire time (minor TTL))
noeviction -> 根本不过时,写操做直接报错
默认策略:
maxmemory-policy volatile-lru
对于处理redis内存来讲,LRU和minor TTL算法不是精确的,而是近似的(估计的)算法。因此咱们会检查某些样本#来达到内存检查的目的。默认的样本数是3,你能够修改它。
maxmemory-samples 3
38. 默认状况下,Redis会异步的把数据保存到硬盘。若是你的应用场景容许由于系统崩溃等极端状况而致使最新数据丢失#的话,那这种作法已经很ok了。不然你应该打开‘append only’模式,开启这种模式后,Redis会在#appendonly.aof文件中添加每个写操做,这个文件会在Redis启动时被读取来在内存中从新构建数据集。
注意:若是你须要,你能够同时开启‘append only’模式和异步dumps模式(你须要注释掉上面的‘save’表达式来禁#止dumps),这种状况下,Redis重建数据集时会优先使用appendonly.aof而忽略dump.rdb
appendonly no
append only 文件名 (默认: "appendonly.aof")
appendfilename appendonly.aof
调用fsync()函数通知操做系统马上向硬盘写数据
Redis支持3中模式:
no:不fsync, 只是通知OS能够flush数据了,具体是否flush取决于OS.性能更好.
always: 每次写入append only 日志文件后都会fsync . 性能差,但很安全.
everysec: 没间隔1秒进行一次fsync. 折中.
默认是 "everysec"
appendfsync always
appendfsync everysec
appendfsync no
当AOF fsync策略被设置为always或者everysec而且后台保存进程(saving process)正在执行大量I/O操做时
Redis可能会在fsync()调用上阻塞过长时间
no-appendfsync-on-rewrite no
39. append only 文件的自动重写
当AOF 日志文件即将增加到指定百分比时,Redis能够经过调用BGREWRITEAOF 来自动重写append only文件。
它是这么干的:Redis会记住最近一次重写后的AOF 文件size。而后它会把这个size与当前size进行比较,若是当前# size比指定的百分比大,就会触发重写。一样,你须要指定AOF文件被重写的最小size,这对避免虽然百分比达到了# 可是实际上文件size仍是很小(这种状况没有必要重写)却致使AOF文件重写的状况颇有用。
auto-aof-rewrite-percentage 设置为 0 能够关闭AOF重写功能
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb
40. slow log
Redis slow log用来记录超过指定执行时间的查询。
你能够指定两个参数:一个是慢查询的阀值,单位是毫秒;另一个是slow log的长度,至关于一个队列。
负数则关闭slow log,0则会致使每一个命令都被记录
slowlog-log-slower-than 10000
# 不设置会消耗过多内存,因此仍是要设置一下。可使用SLOWLOG RESET命令来回收slow log使用的内存
slowlog-max-len 1024