Redis 几种数据类型及应用场景

Redis支持5种数据类型：string（字符串），hash（哈希），list（列表），set（集合）及zset(sorted set：有序集合)。什么时候使用Redis呢?

先经过一张图了解下Redis内部内存管理中是如何描述这些不一样数据类型的：

首先Redis内部使用一个redisObject对象来表示全部的key和value，redisObject最主要的信息如上图所示：type表明一个value对象具体是何种数据类型，encoding是不一样数据类型在redis内部的存储方式，好比：type=string表明value存储的是一个普通字符串，那么对应的encoding能够是raw或者是int，若是是int则表明实际redis内部是按数值型类存储和表示这个字符串的，固然前提是这个字符串自己能够用数值表示，好比:"123" "456"这样的字符串。

  这里须要特殊说明一下vm字段，只有打开了Redis的虚拟内存功能，此字段才会真正的分配内存，该功能默认是关闭状态的。经过上图咱们能够发现Redis使用redisObject来表示全部的key/value数据是比较浪费内存的，固然这些内存管理成本的付出主要也是为了给Redis不一样数据类型提供一个统一的管理接口，实际做者也提供了多种方法帮助咱们尽可能节省内存使用，咱们随后会具体讨论。

 

1、string

string 是 redis 最基本的类型，你能够理解成与 Memcached 如出一辙的类型，一个 key 对应一个 value。value其实不只是String，也能够是数字。string 类型是二进制安全的。意思是 redis 的 string 能够包含任何数据。好比jpg图片或者序列化的对象。string 类型是 Redis 最基本的数据类型，string 类型的值最大能存储 512MB。

经常使用命令：get、set、incr、decr、mget等。

应用场景：String是最经常使用的一种数据类型，普通的key/ value 存储均可以归为此类，便可以彻底实现目前 Memcached 的功能，而且效率更高。还能够享受Redis的定时持久化，操做日志及 Replication等功能。除了提供与 Memcached 同样的get、set、incr、decr 等操做外，Redis还提供了下面一些操做：

• 获取字符串长度
• 往字符串append内容
• 设置和获取字符串的某一段内容
• 设置及获取字符串的某一位（bit）
• 批量设置一系列字符串的内容

使用场景：常规key-value缓存应用。常规计数: 微博数, 粉丝数。 实现方式：String在redis内部存储默认就是一个字符串，被redisObject所引用，当遇到incr,decr等操做时会转成数值型进行计算，此时redisObject的encoding字段为int。

redis 127.0.0.1:6379> SET name "runoob"
"OK" redis 127.0.0.1:6379> GET name
"runoob"
复制代码

在以上实例中咱们使用了 Redis 的 SET 和 GET 命令。键为 name，对应的值为 runoob。 **注意：**一个键最大能存储512MB。

2、Hash

Hash 是一个键值(key => value)对集合。Redis hash 是一个 string 类型的 field 和 value 的映射表，hash 特别适合用于存储对象。 经常使用命令：hget,hset,hgetall 等。 应用场景：咱们简单举个实例来描述下Hash的应用场景，好比咱们要存储一个用户信息对象数据，包含如下信息：

用户ID为查找的key，存储的value用户对象包含姓名，年龄，生日等信息，若是用普通的key/value结构来存储，主要有如下2种存储方式：

第一种方式将用户ID做为查找key,把其余信息封装成一个对象以序列化的方式存储，这种方式的缺点是，增长了序列化/反序列化的开销，而且在须要修改其中一项信息时，须要把整个对象取回，而且修改操做须要对并发进行保护，引入CAS等复杂问题。

第二种方法是这个用户信息对象有多少成员就存成多少个key-value对儿，用用户ID+对应属性的名称做为惟一标识来取得对应属性的值，虽然省去了序列化开销和并发问题，可是用户ID为重复存储，若是存在大量这样的数据，内存浪费仍是很是可观的。

那么Redis提供的Hash很好的解决了这个问题，Redis的Hash实际是内部存储的Value为一个HashMap，并提供了直接存取这个Map成员的接口，以下图：

也就是说，Key仍然是用户ID, value是一个Map，这个Map的key是成员的属性名，value是属性值，这样对数据的修改和存取均可以直接经过其内部Map的Key(Redis里称内部Map的key为field), 也就是经过 key(用户ID) + field(属性标签) 就能够操做对应属性数据了，既不须要重复存储数据，也不会带来序列化和并发修改控制的问题，很好的解决了问题。

这里同时须要注意，Redis提供了接口(hgetall)能够直接取到所有的属性数据，可是若是内部Map的成员不少，那么涉及到遍历整个内部Map的操做，因为Redis单线程模型的缘故，这个遍历操做可能会比较耗时，而另其它客户端的请求彻底不响应，这点须要格外注意。 使用场景：存储部分变动数据，如用户信息等。 实现方式：上面已经说到Redis Hash对应Value内部实际就是一个HashMap，实际这里会有2种不一样实现，这个Hash的成员比较少时Redis为了节省内存会采用相似一维数组的方式来紧凑存储，而不会采用真正的HashMap结构，对应的value redisObject的encoding为zipmap，当成员数量增大时会自动转成真正的HashMap，此时encoding为ht。

redis> HSET myhash field1 "Hello" field2 "World"
"OK" redis> HGET myhash field1
"Hello" redis> HGET myhash field2
"World"
复制代码

  实例中咱们使用了 Redis HMSET, HGET 命令，HMSET 设置了两个 field=>value 对, HGET 获取对应 field 对应的 value。每一个 hash 能够存储 2³² -1 键值对（40多亿）。

3、list

list 列表是简单的字符串列表，按照插入顺序排序。你能够添加一个元素到列表的头部（左边）或者尾部（右边）。

经常使用命令：lpush（添加左边元素）,rpush,lpop（移除左边第一个元素）,rpop,lrange（获取列表片断，LRANGE key start stop）等。

应用场景：Redis list的应用场景很是多，也是Redis最重要的数据结构之一，好比twitter的关注列表，粉丝列表等均可以用Redis的list结构来实现。

List 就是链表，相信略有数据结构知识的人都应该能理解其结构。使用List结构，咱们能够轻松地实现最新消息排行等功能。List的另外一个应用就是消息队列， 能够利用List的PUSH操做，将任务存在List中，而后工做线程再用POP操做将任务取出进行执行。Redis还提供了操做List中某一段的api，你能够直接查询，删除List中某一段的元素。

实现方式：Redis list的实现为一个双向链表，便可以支持反向查找和遍历，更方便操做，不过带来了部分额外的内存开销，Redis内部的不少实现，包括发送缓冲队列等也都是用的这个数据结构。

Redis的list是每一个子元素都是String类型的双向链表，能够经过push和pop操做从列表的头部或者尾部添加或者删除元素，这样List便可以做为栈，也能够做为队列。 获取越接近两端的元素速度越快，但经过索引访问时会比较慢。

使用场景： 消息队列系统：使用list能够构建队列系统，使用sorted set甚至能够构建有优先级的队列系统。好比：将Redis用做日志收集器，实际上仍是一个队列，多个端点将日志信息写入Redis，而后一个worker统一将全部日志写到磁盘。

取最新N个数据的操做：记录前N个最新登录的用户Id列表，超出的范围能够从数据库中得到。

//把当前登陆人添加到链表里
ret = r.lpush("login:last_login_times", uid) //保持链表只有N位
ret = redis.ltrim("login:last_login_times", 0, N-1) //得到前N个最新登录的用户Id列表
last_login_list = r.lrange("login:last_login_times", 0, N-1)
复制代码

好比微博： 在Redis中咱们的最新微博ID使用了常驻缓存，这是一直更新的。可是咱们作了限制不能超过5000个ID，所以咱们的获取ID函数会一直询问Redis。只有在start/count参数超出了这个范围的时候，才须要去访问数据库。咱们的系统不会像传统方式那样“刷新”缓存，Redis实例中的信息永远是一致的。SQL数据库（或是硬盘上的其余类型数据库）只是在用户须要获取“很远”的数据时才会被触发，而主页或第一个评论页是不会麻烦到硬盘上的数据库了。

redis 127.0.0.1:6379> lpush runoob redis
(integer) 1 redis 127.0.0.1:6379> lpush runoob mongodb
(integer) 2 redis 127.0.0.1:6379> lpush runoob rabitmq
(integer) 3 redis 127.0.0.1:6379> lrange runoob 0 10
1) "rabitmq"
2) "mongodb"
3) "redis" redis 127.0.0.1:6379>
复制代码

列表最多可存储 2³² - 1 元素 (4294967295, 每一个列表可存储40多亿)。

4、 set

set 是string类型的无序集合。集合是经过hashtable实现的，概念和数学中个的集合基本相似，能够交集，并集，差集等等，set中的元素是没有顺序的。因此添加，删除，查找的复杂度都是O(1)。

*sadd 命令：*添加一个 string 元素到 key 对应的 set 集合中，成功返回1，若是元素已经在集合中返回 0，若是 key 对应的 set 不存在则返回错误。

经常使用命令：sadd,spop,smembers,sunion 等。

应用场景：Redis set对外提供的功能与list相似是一个列表的功能，特殊之处在于set是能够自动排重的，当你须要存储一个列表数据，又不但愿出现重复数据时，set是一个很好的选择，而且set提供了判断某个成员是否在一个set集合内的重要接口，这个也是list所不能提供的。

Set 就是一个集合，集合的概念就是一堆不重复值的组合。利用Redis提供的Set数据结构，能够存储一些集合性的数据。

案例：在微博中，能够将一个用户全部的关注人存在一个集合中，将其全部粉丝存在一个集合。Redis还为集合提供了求交集、并集、差集等操做，能够很是方便的实现如共同关注、共同喜爱、二度好友等功能，对上面的全部集合操做，你还可使用不一样的命令选择将结果返回给客户端仍是存集到一个新的集合中。

实现方式： set 的内部实现是一个 value永远为null的HashMap，实际就是经过计算hash的方式来快速排重的，这也是set能提供判断一个成员是否在集合内的缘由。

使用场景： ①交集，并集，差集：(Set)

//book表存储book名称
set book:1:name    ”The Ruby Programming Language”
set book:2:name     ”Ruby on rail”
set book:3:name     ”Programming Erlang” //tag表使用集合来存储数据，由于集合擅长求交集、并集
sadd tag:ruby 1 sadd tag:ruby 2 sadd tag:web 2 sadd tag:erlang 3
//即属于ruby又属于web的书？
inter_list = redis.sinter("tag.web", "tag:ruby") //即属于ruby，但不属于web的书？
inter_list = redis.sdiff("tag.ruby", "tag:web") //属于ruby和属于web的书的合集？
inter_list = redis.sunion("tag.ruby", "tag:web")
复制代码

②获取某段时间全部数据去重值 这个使用Redis的set数据结构最合适了，只须要不断地将数据往set中扔就好了，set意为集合，因此会自动排重。

sadd key member
复制代码

redis 127.0.0.1:6379> sadd runoob redis
(integer) 1 redis 127.0.0.1:6379> sadd runoob mongodb
(integer) 1 redis 127.0.0.1:6379> sadd runoob rabitmq
(integer) 1 redis 127.0.0.1:6379> sadd runoob rabitmq
(integer) 0 redis 127.0.0.1:6379> smembers runoob
1) "redis"
2) "rabitmq"
3) "mongodb"
复制代码

**注意：**以上实例中 rabitmq 添加了两次，但根据集合内元素的惟一性，第二次插入的元素将被忽略。集合中最大的成员数为 2³² - 1(4294967295, 每一个集合可存储40多亿个成员)。

五 、zset

zset 和 set 同样也是string类型元素的集合,且不容许重复的成员。 *zadd 命令：*添加元素到集合，元素在集合中存在则更新对应score。 经常使用命令：zadd,zrange,zrem,zcard等

使用场景：Redis sorted set的使用场景与set相似，区别是set不是自动有序的，而sorted set能够经过用户额外提供一个优先级(score)的参数来为成员排序，而且是插入有序的，即自动排序。当你须要一个有序的而且不重复的集合列表，那么能够选择sorted set数据结构，好比twitter 的public timeline能够以发表时间做为score来存储，这样获取时就是自动按时间排好序的。和Set相比，Sorted Set关联了一个double类型权重参数score，使得集合中的元素可以按score进行有序排列，redis正是经过分数来为集合中的成员进行从小到大的排序。zset的成员是惟一的,但分数(score)却能够重复。好比一个存储全班同窗成绩的Sorted Set，其集合value能够是同窗的学号，而score就能够是其考试得分，这样在数据插入集合的时候，就已经进行了自然的排序。另外还能够用Sorted Set来作带权重的队列，好比普通消息的score为1，重要消息的score为2，而后工做线程能够选择按score的倒序来获取工做任务。让重要的任务优先执行。

实现方式：Redis sorted set的内部使用HashMap和跳跃表(SkipList)来保证数据的存储和有序，HashMap里放的是成员到score的映射，而跳跃表里存放的是全部的成员，排序依据是HashMap里存的score,使用跳跃表的结构能够得到比较高的查找效率，而且在实现上比较简单。

zadd key score member
复制代码

redis 127.0.0.1:6379> zadd runoob 0 redis
(integer) 1 redis 127.0.0.1:6379> zadd runoob 0 mongodb
(integer) 1 redis 127.0.0.1:6379> zadd runoob 0 rabitmq
(integer) 1 redis 127.0.0.1:6379> zadd runoob 0 rabitmq
(integer) 0 redis 127.0.0.1:6379> > ZRANGEBYSCORE runoob 0 1000
1) "mongodb"
2) "rabitmq"
3) "redis"
复制代码

各个数据类型应用场景：

类型	简介	特性	场景
String(字符串)	二进制安全	能够包含任何数据,好比jpg图片或者序列化的对象,一个键最大能存储512M	---
Hash(字典)	键值对集合,即编程语言中的Map类型	适合存储对象,而且能够像数据库中update一个属性同样只修改某一项属性值(Memcached中须要取出整个字符串反序列化成对象修改完再序列化存回去)	存储、读取、修改用户属性
List(列表)	链表(双向链表)	增删快,提供了操做某一段元素的API	一、最新消息排行等功能(好比朋友圈的时间线) 二、消息队列
Set(集合)	哈希表实现,元素不重复	一、添加、删除、查找的复杂度都是O(1)  二、为集合提供了求交集、并集、差集等操做	一、共同好友 二、利用惟一性,统计访问网站的全部独立ip 三、好友推荐时,根据tag求交集,大于某个阈值就能够推荐
Sorted Set(有序集合)	将Set中的元素增长一个权重参数score,元素按score有序排列	数据插入集合时,已经进行自然排序	一、排行榜 二、带权重的消息队列

Redis实际应用场景

Redis在不少方面与其余数据库解决方案不一样：它使用内存提供主存储支持，而仅使用硬盘作持久性的存储；它的数据模型很是独特，用的是单线程。另外一个大区别在于，你能够在开发环境中使用Redis的功能，但却不须要转到Redis。

转向Redis固然也是可取的，许多开发者从一开始就把Redis做为首选数据库；但设想若是你的开发环境已经搭建好，应用已经在上面运行了，那么更换数据库框架显然不那么容易。另外在一些须要大容量数据集的应用，Redis也并不适合，由于它的数据集不会超过系统可用的内存。因此若是你有大数据应用，并且主要是读取访问模式，那么Redis并非正确的选择。

然而我喜欢Redis的一点就是你能够把它融入到你的系统中来，这就可以解决不少问题，好比那些你现有的数据库处理起来感到缓慢的任务。这些你就能够经过Redis来进行优化，或者为应用建立些新的功能。在本文中，我就想探讨一些怎样将Redis加入到现有的环境中，并利用它的原语命令等功能来解决 传统环境中碰到的一些常见问题。在这些例子中，Redis都不是做为首选数据库。

一、显示最新的项目列表 下面这个语句经常使用来显示最新项目，随着数据多了，查询毫无疑问会愈来愈慢。

SELECT * FROM foo WHERE ... ORDER BY time DESC LIMIT 10

在微博应用中，“列出最新的回复”之类的查询很是广泛，这一般会带来可扩展性问题。这使人沮丧，由于项目原本就是按这个顺序被建立的，但要输出这个顺序却不得不进行排序操做。

相似的问题就能够用Redis来解决。好比说，咱们的一个微博应用想要列出用户贴出的最新20条评论。在最新的评论边上咱们有一个“显示所有”的连接，点击后就能够得到更多的评论。

咱们假设数据库中的每条评论都有一个惟一的递增的ID字段。咱们可使用分页来制做主页和评论页，使用Redis的模板，每次新评论发表时，咱们会将它的ID添加到一个Redis列表：

LPUSH latest.comments <ID>

咱们将列表裁剪为指定长度，所以Redis只须要保存最新的5000条评论：

LTRIM latest.comments 0 5000

每次咱们须要获取最新评论的项目范围时，咱们调用一个函数来完成（使用伪代码）：

FUNCTION get_latest_comments(start, num_items):  
    id_list = redis.lrange("latest.comments",start,start+num_items - 1)  
    IF id_list.length < num_items  
        id_list = SQL_DB("SELECT ... ORDER BY time LIMIT ...")  
    END  
    RETURN id_list  
END
复制代码

这里咱们作的很简单。在Redis中咱们的最新ID使用了常驻缓存，这是一直更新的。可是咱们作了限制不能超过5000个ID，所以咱们的获取ID函数会一直询问Redis。只有在start/count参数超出了这个范围的时候，才须要去访问数据库。咱们的系统不会像传统方式那样“刷新”缓存，Redis实例中的信息永远是一致的。SQL数据库（或是硬盘上的其余类型数据库）只是在用户须要获取“很远”的数据时才会被触发，而主页或第一个评论页是不会麻烦到硬盘上的数据库了。

二、删除与过滤

咱们可使用LREM来删除评论。若是删除操做很是少，另外一个选择是直接跳过评论条目的入口，报告说该评论已经不存在。

redis 127.0.0.1:6379> LREM KEY_NAME COUNT VALUE

有些时候你想要给不一样的列表附加上不一样的过滤器。若是过滤器的数量受到限制，你能够简单的为每一个不一样的过滤器使用不一样的Redis列表。毕竟每一个列表只有5000条项目，但Redis却可以使用很是少的内存来处理几百万条项目。

三、排行榜相关

另外一个很广泛的需求是各类数据库的数据并不是存储在内存中，所以在按得分排序以及实时更新这些几乎每秒钟都须要更新的功能上数据库的性能不够理想。 典型的好比那些在线游戏的排行榜，好比一个Facebook的游戏，根据得分你一般想要：

• 列出前100名高分选手
• 列出某用户当前的全球排名

这些操做对于Redis来讲小菜一碟，即便你有几百万个用户，每分钟都会有几百万个新的得分。 模式是这样的，每次得到新得分时，咱们用这样的代码：

ZADD leaderboard <score> <username> 你可能用userID来取代username，这取决于你是怎么设计的。 获得前100名高分用户很简单：ZREVRANGE leaderboard 0 99。 用户的全球排名也类似，只须要：ZRANK leaderboard 。

四、按照用户投票和时间排序

排行榜的一种常见变体模式就像Reddit或Hacker News用的那样，新闻按照相似下面的公式根据得分来排序：

score = points / time^alpha

所以用户的投票会相应的把新闻挖出来，但时间会按照必定的指数将新闻埋下去。下面是咱们的模式，固然算法由你决定。

模式是这样的，开始时先观察那些多是最新的项目，例如首页上的1000条新闻都是候选者，所以咱们先忽视掉其余的，这实现起来很简单。

每次新的新闻贴上来后，咱们将ID添加到列表中，使用LPUSH + LTRIM，确保只取出最新的1000条项目。

有一项后台任务获取这个列表，而且持续的计算这1000条新闻中每条新闻的最终得分。计算结果由ZADD命令按照新的顺序填充生成列表，老新闻则被清除。这里的关键思路是排序工做是由后台任务来完成的。

五、处理过时项目

另外一种经常使用的项目排序是按照时间排序。咱们使用unix时间做为得分便可。 模式以下：

• 每次有新项目添加到咱们的非Redis数据库时，咱们把它加入到排序集合中。这时咱们用的是时间属性，current_time和time_to_live。
• 另外一项后台任务使用ZRANGE…SCORES查询排序集合，取出最新的10个项目。若是发现unix时间已通过期，则在数据库中删除条目。

六、计数

Redis是一个很好的计数器，这要感谢INCRBY和其余类似命令。 我相信你曾许屡次想要给数据库加上新的计数器，用来获取统计或显示新信息，可是最后却因为写入敏感而不得不放弃它们。 如今使用Redis就不须要再担忧了。有了原子递增（atomic increment），你能够放心的加上各类计数，用GETSET重置，或者是让它们过时。 例如这样操做：

INCR user:<id> EXPIRE 
user:<id> 60
复制代码

你能够计算出最近用户在页面间停顿不超过60秒的页面浏览量，当计数达到好比20时，就能够显示出某些条幅提示，或是其它你想显示的东西。

七、特定时间内的特定项目

另外一项对于其余数据库很难，但Redis作起来却垂手可得的事就是统计在某段特色时间里有多少特定用户访问了某个特定资源。好比我想要知道某些特定的注册用户或IP地址，他们到底有多少访问了某篇文章。 每次我得到一次新的页面浏览时我只须要这样作：

SADD page:day1:<page_id> <user_id>

固然你可能想用unix时间替换day1，好比time()-(time()%3600*24)等等。 想知道特定用户的数量吗？只须要使用 SCARD page:day1:<page_id>

须要测试某个特定用户是否访问了这个页面？

SISMEMBER page:day1:<page_id>

八、实时分析正在发生的状况，用于数据统计与防止垃圾邮件等

咱们只作了几个例子，但若是你研究Redis的命令集，而且组合一下，就能得到大量的实时分析方法，有效并且很是省力。使用Redis原语命令，更容易实施垃圾邮件过滤系统或其余实时跟踪系统。

九、Pub/Sub

Redis的Pub/Sub很是很是简单，运行稳定而且快速。支持模式匹配，可以实时订阅与取消频道。

十、队列

你应该已经注意到像list push和list pop这样的Redis命令可以很方便的执行队列操做了，但能作的可不止这些：好比Redis还有list pop的变体命令，可以在列表为空时阻塞队列。

现代的互联网应用大量地使用了消息队列（Messaging）。消息队列不只被用于系统内部组件之间的通讯，同时也被用于系统跟其它服务之间的交互。消息队列的使用能够增长系统的可扩展性、灵活性和用户体验。非基于消息队列的系统，其运行速度取决于系统中最慢的组件的速度（注：短板效应）。而基于消息队列能够将系统中各组件解除耦合，这样系统就再也不受最慢组件的束缚，各组件能够异步运行从而得以更快的速度完成各自的工做。

此外，当服务器处在高并发操做的时候，好比频繁地写入日志文件。能够利用消息队列实现异步处理。从而实现高性能的并发操做。

十一、缓存

Redis的缓存部分值得写一篇新文章，我这里只是简单的说一下。Redis可以替代memcached，让你的缓存从只能存储数据变得可以更新数据，所以你再也不须要每次都从新生成数据了。