Redis是什么?看这一篇就够了

引言

在Web应用发展的初期,那时关系型数据库受到了较为普遍的关注和应用,缘由是由于那时候Web站点基本上访问和并发不高、交互也较少。而在后来,随着访问量的提高,使用关系型数据库的Web站点多多少少都开始在性能上出现了一些瓶颈,而瓶颈的源头通常是在磁盘的I/O上。而随着互联网技术的进一步发展,各类类型的应用层出不穷,这致使在当今云计算、大数据盛行的时代,对性能有了更多的需求,主要体如今如下四个方面:node

  1. 低延迟的读写速度:应用快速地反应能极大地提高用户的满意度
  2. 支撑海量的数据和流量:对于搜索这样大型应用而言,须要利用PB级别的数据和能应对百万级的流量
  3. 大规模集群的管理:系统管理员但愿分布式应用能更简单的部署和管理
  4. 庞大运营成本的考量:IT部门但愿在硬件成本、软件成本和人力成本可以有大幅度地下降

为了克服这一问题,NoSQL应运而生,它同时具有了高性能、可扩展性强、高可用等优势,受到普遍开发人员和仓库管理人员的青睐。git

Redis是什么

Redis是如今最受欢迎的NoSQL数据库之一,Redis是一个使用ANSI C编写的开源、包含多种数据结构、支持网络、基于内存、可选持久性的键值对存储数据库,其具有以下特性:github

  • 基于内存运行,性能高效
  • 支持分布式,理论上能够无限扩展
  • key-value存储系统
  • 开源的使用ANSI C语言编写、遵照BSD协议、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库,并提供多种语言的API

相比于其余数据库类型,Redis具有的特色是:数据库

  • C/S通信模型
  • 单进程单线程模型
  • 丰富的数据类型
  • 操做具备原子性
  • 持久化
  • 高并发读写
  • 支持lua脚本

哪些大厂在使用Redis?json

  • github
  • twitter
  • 微博
  • Stack Overflow
  • 阿里巴巴
  • 百度
  • 美团
  • 搜狐

Redis的应用场景有哪些?

Redis 的应用场景包括:缓存系统(“热点”数据:高频读、低频写)、计数器、消息队列系统、排行榜、社交网络和实时系统。后端

watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=

Redis的数据类型及主要特性

Redis提供的数据类型主要分为5种自有类型和一种自定义类型,这5种自有类型包括:String类型、哈希类型、列表类型、集合类型和顺序集合类型。数组

watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=

String类型:

它是一个二进制安全的字符串,意味着它不只可以存储字符串、还能存储图片、视频等多种类型, 最大长度支持512M。缓存

对每种数据类型,Redis都提供了丰富的操做命令,如:安全

  • GET/MGET
  • SET/SETEX/MSET/MSETNX
  • INCR/DECR
  • GETSET
  • DEL

哈希类型:

该类型是由field和关联的value组成的map。其中,field和value都是字符串类型的。服务器

Hash的操做命令以下:

  • HGET/HMGET/HGETALL
  • HSET/HMSET/HSETNX
  • HEXISTS/HLEN
  • HKEYS/HDEL
  • HVALS

列表类型:

该类型是一个插入顺序排序的字符串元素集合, 基于双链表实现。

List的操做命令以下:

  • LPUSH/LPUSHX/LPOP/RPUSH/RPUSHX/RPOP/LINSERT/LSET
  • LINDEX/LRANGE
  • LLEN/LTRIM

集合类型:

Set类型是一种无顺序集合, 它和List类型最大的区别是:集合中的元素没有顺序, 且元素是惟一的。

Set类型的底层是经过哈希表实现的,其操做命令为:

  • SADD/SPOP/SMOVE/SCARD
  • SINTER/SDIFF/SDIFFSTORE/SUNION

Set类型主要应用于:在某些场景,如社交场景中,经过交集、并集和差集运算,经过Set类型能够很是方便地查找共同好友、共同关注和共同偏好等社交关系。

顺序集合类型:

ZSet是一种有序集合类型,每一个元素都会关联一个double类型的分数权值,经过这个权值来为集合中的成员进行从小到大的排序。与Set类型同样,其底层也是经过哈希表实现的。

ZSet命令:

  • ZADD/ZPOP/ZMOVE/ZCARD/ZCOUNT
  • ZINTER/ZDIFF/ZDIFFSTORE/ZUNION

Redis的数据结构

Redis的数据结构以下图所示:

watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=

关于上表中的部分释义:

  1. 压缩列表是列表键和哈希键的底层实现之一。当一个列表键只包含少许列表项,而且每一个列表项要么就是小整数,要么就是长度比较短的字符串,Redis就会使用压缩列表来作列表键的底层实现
  2. 整数集合是集合键的底层实现之一,当一个集合只包含整数值元素,而且这个集合的元素数量很少时,Redis就会使用整数集合做为集合键的底层实现

以下是定义一个Struct数据结构的例子:

watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=

简单动态字符串SDS (Simple Dynamic String)

基于C语言中传统字符串的缺陷,Redis本身构建了一种名为简单动态字符串的抽象类型,简称SDS,其结构以下:

watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=

SDS几乎贯穿了Redis的全部数据结构,应用十分普遍。

SDS的特色

和C字符串相比,SDS的特色以下:

watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=

1. 常数复杂度获取字符串长度

Redis中利用SDS字符串的len属性能够直接获取到所保存的字符串的长    度,直接将获取字符串长度所需的复杂度从C字符串的O(N)下降到了O(1)。

2. 减小修改字符串时致使的内存从新分配次数

经过C字符串的特性,咱们知道对于一个包含了N个字符的C字符串来讲,其底层实现老是N+1个字符长的数组(额外一个空字符结尾)

那么若是这个时候须要对字符串进行修改,程序就须要提早对这个C字符串数组进行一次内存重分配(多是扩展或者释放)

而内存重分配就意味着是一个耗时的操做。

Redis巧妙的使用了SDS避免了C字符串的缺陷。在SDS中,buf数组的长度不必定就是字符串的字符数量加一,buf数组里面能够包含未使用的字节,而这些未使用的字节由free属性记录。

与此同时,SDS采用了空间预分配的策略,避免C字符串每一次修改时都须要进行内存重分配的耗时操做,将内存重分配从原来的每修改N次就分配N次——>下降到了修改N次最多分配N次。

以下是Redis对SDS的简单定义:

watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk= watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=

Redis特性1:事务

  • 命令序列化,按顺序执行
  • 原子性
  • 三阶段: 开始事务 - 命令入队 - 执行事务
  • 命令:MULTI/EXEC/DISCARD

Redis特性2:发布订阅(Pub/Sub)

  • Pub/sub是一种消息通信模式
  • Pub发送消息, Sub接受消息
  • Redis客户端能够订阅任意数量的频道
  • “fire and forgot”, 发送即遗忘
  • 命令:Publish/Subscribe/Psubscribe/UnSub
watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=

Redis特性3:Stream

  • Redis 5.0新增
  • 等待消费
  • 消费组(组内竞争)
  • 消费历史数据
  • FIFO
watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=

以上就是Redis的基本概念,下面咱们将介绍在开发过程当中可能会踩到的“坑”。

Redis常见问题解析:击穿

概念:在Redis获取某一key时, 因为key不存在, 而必须向DB发起一次请求的行为, 称为“Redis击穿”。

watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=

引起击穿的缘由:

  • 第一次访问
  • 恶意访问不存在的key
  • Key过时

合理的规避方案:

  • 服务器启动时, 提早写入
  • 规范key的命名, 经过中间件拦截
  • 对某些高频访问的Key,设置合理的TTL或永不过时

Redis常见问题解析:雪崩

概念:Redis缓存层因为某种缘由宕机后,全部的请求会涌向存储层,短期内的高并发请求可能会致使存储层挂机,称之为“Redis雪崩”。

合理的规避方案:

  • 使用Redis集群
  • 限流

Redis在产品开发中的应用实践

为此,我很高兴的为你们介绍,葡萄城架构师Jim将在2019-11-27 14:00 为你们带来一场公开课,其中 Jim除了为你们讲解Redis的基础,同时也会实际演示他所在的项目组使用Redis时碰到的问题以及解决方案,对于刚接触Redis的同窗来讲,更具参考意义和学习价值,欢迎你们届时参加,公开课地址:https://live.vhall.com/661463644。

  • 后端采用nodeJS
  • 使用Azure的Redis服务
  • Redis的使用场景

-  token缓存, 用于令牌验证

-  IP白名单

碰到的问题

  • “网络抖动”或者Redis服务异常致使Redis访问超时
  • Redis客户端驱动稳定性问题

-  链接池 “Broken connection” 问题

-  JS的Promise引出的Redis重置问题

下面咱们来简单了解一下Redis的进阶知识。

进阶之Redis协议简介

Redis客户端通信协议:RESP(Redis Serialization Protocol),其特色是:

  • 简单
  • 解析速度快
  • 可读性好

Redis集群内部通信协议:RECP(Redis Cluster Protocol ) ,其特色是:

  • 每个node两个tcp 链接
  • 一个负责client-server通信(P: 6379)
  • 一个负责node之间通信(P: 10000 + 6379)
watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=

Redis协议支持的数据类型:

  • 简单字符(首字节: “+”)

    “+OK\r\n”

  • 错误(首字节: “-”)

    “-error msg\r\n”

  • 数字(首字节: “:”)

    “:123\r\n”

  • 批量字符(首字节: “$”)

    “&hello\r\nWhoa re you\r\n”

  • 数组(首字节: “*”)

    “*0\r\n”

    “*-1\r\n”

除了Redis,还有什么NoSQL型数据库

市面上相似于Redis,一样是NoSQL型的数据库有不少,以下图所示,除了Redis,还有MemCache、Cassadra和Mongo。下面,咱们就分别对这几个数据库作一下简要的介绍:

watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=

**Memcache:**这是一个和Redis很是类似的数据库,可是它的数据类型没有Redis丰富。Memcache由LiveJournal的Brad Fitzpatrick开发,做为一套分布式的高速缓存系统,被许多网站使用以提高网站的访问速度,对于一些大型的、须要频繁访问数据库的网站访问速度的提高效果十分显著。

Apache Cassandra:(社区内通常简称为C*)这是一套开源分布式NoSQL数据库系统。它最初由Facebook开发,用于储存收件箱等简单格式数据,集Google BigTable的数据模型与Amazon Dynamo的彻底分布式架构于一身。Facebook于2008将 Cassandra 开源,因为其良好的可扩展性和性能,被 Apple、Comcast、Instagram、Spotify、eBay、Rackspace、Netflix等知名网站所采用,成为了一种流行的分布式结构化数据存储方案。

MongoDB:是一个基于分布式文件存储、面向文档的NoSQL数据库,由C++编写,旨在为WEB应用提供可扩展的高性能数据存储解决方案。MongoDB是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功能最丰富,最像关系型数据库的,它支持的数据结构很是松散,是一种相似json的BSON格式。

总结

以上就是Redis入门介绍教程,若是各位还想了解更多,欢迎评论。

watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=

相关文章
相关标签/搜索