memcached总结

Memcached说明文档

Memcached是什么？

Memcached 是一个高性能的分布式内存对象缓存系统，用于动态Web应用以减轻数据库负载。它经过在内存中缓存数据和对象来减小读取数据库的次数，从而提供动态、数据库驱动网站的速度。Memcached基于一个存储键/值对的hashmap。其守护进程（daemon ）是用C写的，可是客户端能够用任何语言来编写，并经过memcached协议与守护进程通讯。可是它并不提供冗余（例如，复制其hashmap条目）；当某个服务器S中止运行或崩溃了，全部存放在S上的键/值对都将丢失。

Memcached基本原理

• Socket 服务器端
• 数据：键值对存储
• 内存处理的算法：
  • 本质就是一个大的哈希表。key最大长度是255个字符。
  • 内存模型：Memcache预先将可支配的内存空间进行分区（Slab），每一个分区里再分红多个块（Chunk）最大1MB，但同一个分区里：块的长度（bytes）是固定的。
  • 插入数据：查找适合本身长度的块，而后插入，会有内存浪费。
  • LRU,闲置>过时  >最少访问    
  • 惰性删除：它并无提供监控数据过时的机制，而是惰性的，当查询到某个key数据时，若是过时那么直接抛弃。
• 集群搭建原理：
  • Memcache服务器端并无提供集群功能，可是经过客户端的驱动程序实现了集群配置。
  • o    客户端实现集群的原理：首先客户端配置多台集群机器的ip和端口的列表。而后客户端驱动程序在写入以前，首先对key作哈希处理获得哈希值后对总的机器的个数进行取余而后就选择余数对应的机器。

2. Windows版本下载与安装

2.1 下载地址

memcached 1.4.4 for Windows 32-bit

2.2 安装Memcache为系统服务

1. 下载memcached的windows稳定版，解压放某个盘下面，好比在c:\memcached
2. 在CMD下输入 “c:\memcached\memcached.exe -d install“ 安装.
3. 再输入：”c:\memcached\memcached.exe -d start“ 启动。
4. 遇到问题：win8下安装服务。没法启动此程序，由于计算机中丢失 MSVCR71.dll。尝试从新安装该程序以解决此问题。

下载dll地址：http://www.dll-files.com/dllindex/dll-files.shtml?msvcr71

NOTE:
也能够不安装直接启动
之后memcached将做为windows的一个服务每次开机时自动启动。这样服务器端已经安装完毕了。

若是下载的是二进制的版本，直接运行就能够了，能够加上参数来加以设置。

2.3 经常使用命令

-p <num>          监听的端口 -l <ip_addr>      链接的IP地址, 默认是本机 -d start          启动memcached服务 -d restart        重起memcached服务 -d stop|shutdown  关闭正在运行的memcached服务 -d install        安装memcached服务 -d uninstall      卸载memcached服务 -u <username>     以<username>的身份运行 (仅在以root运行的时候有效) -m <num>          最大内存使用，单位MB。默认64MB -M                内存耗尽时返回错误，而不是删除项 -c <num>          最大同时链接数，默认是1024 -f <factor>       块大小增加因子，默认是1.25 -n <bytes>        最小分配空间，key+value+flags默认是48 -h                显示帮助

而后就能够用.net 的memcached客户端来试一下了。

3.客户端使用

3.1 、telnet简介

Telnet协议是TCP/IP协议族中的一员，是Internet远程登录服务的标准协议和主要方式。它为用户提供了在本地计算机上完成远程主机工做的能力。在终端使用者的电脑上使用telnet程序，用它链接到服务器。终端使用者能够在telnet程序中输入命令，这些命令会在服务器上运行，就像直接在服务器的控制台上输入同样。能够在本地就能控制服务器。要开始一个telnet会话，必须输入用户名和密码来登陆服务器。Telnet是经常使用的远程控制Web服务器的方法。

3.二、使用telnet链接memcached

用telnet链接memcached有两种方式。

1.  用windows系统的命名提示符。

输入：telnet localhost 11211，进行链接。（若是链接失败，应该是telnet客户端没有开启，win7默认是关闭状态）。

2.  使用链接软件PuTTy 。

PuTTY是一个Telnet、SSH、rlogin、纯TCP以及串行接口链接软件。较早的版本仅支持Windows平台，在最近的版本中开始支持各种Unix平台，并打算移植至Mac OS X上。

下载地址：PuTTy

3.三、基本 memcached 客户机命令

若是一切正常，则应该获得一个 telnet 响应，它会指示 Connected to localhost（已经链接到 localhost）。若是未得到此响应，则应该返回以前的步骤并确保 libevent 和 memcached 的源文件都已成功生成。

您现现已经登陆到 memcached 服务器。此后，您将可以经过一系列简单的命令来与 memcached 通讯。9 个 memcached 客户端命令能够分为三类：

• 基本
• 高级
• 管理

您将使用五种基本 memcached 命令执行最简单的操做。这些命令和操做包括：

• set
• add
• replace
• get
• delete

前三个命令是用于操做存储在 memcached 中的键值对的标准修改命令。它们都很是简单易用。 

3.3.1修改命令语法

command <key> <flags> <expiration time> <bytes>

<value>

memcached 修改命令的参数和用法。

参数	用法
key	key 用于查找缓存值
flags	能够包括键值对的整型参数，客户机使用它存储关于键值对的额外信息
expiration time	在缓存中保存键值对的时间长度（以秒为单位，0 表示永远）
bytes	在缓存中存储的字节点
value	存储的值（始终位于第二行）

如今，咱们来看看这些命令的实际使用。

set
set 命令用于向缓存添加新的键值对。若是键已经存在，则以前的值将被替换。

注意如下交互，它使用了 set 命令：

set userId 0 0 5

12345

STORED

若是使用 set 命令正确设定了键值对，服务器将使用单词 STORED 进行响应。本示例向缓存中添加了一个键值对，其键为 userId，其值为 12345。并将过时时间设置为 0，这将向 memcached 通知您但愿将此值存储在缓存中直到删除它为止。

add
仅当缓存中不存在键时，add 命令才会向缓存中添加一个键值对。若是缓存中已经存在键，则以前的值将仍然保持相同，而且您将得到响应NOT_STORED。

下面是使用 add 命令的标准交互：

set userId 0 0 5

12345

STORED

add userId 0 0 5

55555

NOT_STORED

add companyId 0 0 3

564

STORED

replace
仅当键已经存在时，replace 命令才会替换缓存中的键。若是缓存中不存在键，那么您将从 memcached 服务器接受到一条 NOT_STORED 响应。

下面是使用 replace 命令的标准交互：

replace accountId 0 0 5

67890

NOT_STORED

set accountId 0 0 5

67890

STORED

replace accountId 0 0 5

55555

STORED

最后两个基本命令是 get 和 delete。这些命令至关容易理解，而且使用了相似的语法，以下所示：

command <key>

接下来看这些命令的应用。

get
get 命令用于检索与以前添加的键值对相关的值。您将使用 get 执行大多数检索操做。

下面是使用 get 命令的典型交互：

set userId 0 0 5

12345

STORED

get userId

VALUE userId 0 5

12345

END

get bob

END

如您所见，get 命令至关简单。您使用一个键来调用 get，若是这个键存在于缓存中，则返回相应的值。若是不存在，则不返回任何内容。

delete
最后一个基本命令是 delete。delete 命令用于删除 memcached 中的任何现有值。您将使用一个键调用 delete，若是该键存在于缓存中，则删除该值。若是不存在，则返回一条 NOT_FOUND 消息。

下面是使用 delete 命令的客户机服务器交互：

set userId 0 0 5

98765

STORED

delete bob

NOT_FOUND

delete userId

DELETED

get userId

END

3.4高级 memcached 客户机命令

能够在 memcached 中使用的两个高级命令是 gets 和 cas。gets 和 cas 命令须要结合使用。您将使用这两个命令来确保不会将现有的名称/值对设置为新值（若是该值已经更新过）。咱们来分别看看这些命令。

3.4.1、gets

gets 命令的功能相似于基本的 get 命令。两个命令之间的差别在于，gets 返回的信息稍微多一些：64 位的整型值很是像名称/值对的 “版本” 标识符。

下面是使用 gets 命令的客户机服务器交互：

set userId 0 0 5

12345

STORED

get userId

VALUE userId 0 5

12345

END

gets userId

VALUE userId 0 5 4

12345

END

考虑 get 和 gets 命令之间的差别。gets 命令将返回一个额外的值 — 在本例中是整型值 4，用于标识名称/值对。若是对此名称/值对执行另外一个 set 命令，则 gets 返回的额外值将会发生更改，以代表名称/值对已经被更新。清单 6 显示了一个例子：

3.4.2、 set 更新版本指示符

set userId 0 0 5

33333

STORED

gets userId

VALUE userId 0 5 5

33333

END

您看到 gets 返回的值了吗？它已经更新为 5。您每次修更名称/值对时，该值都会发生更改。

3.4.3、Cas

cas（check 和 set）是一个很是便捷的 memcached 命令，用于设置名称/值对的值（若是该名称/值对在您上次执行 gets 后没有更新过）。它使用与set 命令相相似的语法，但包括一个额外的值：gets 返回的额外值。

注意如下使用 cas 命令的交互：

set userId 0 0 5

55555

STORED

gets userId

VALUE userId 0 5 6

55555

END

cas userId 0 0 5 6

33333

STORED

如您所见，我使用额外的整型值 6 来调用 gets 命令，而且操做运行很是顺序。如今，咱们来看看清单 7 中的一系列命令：

3.4.四、使用旧版本指示符的 cas 命令

set userId 0 0 5

55555

STORED

gets userId

VALUE userId 0 5 8

55555

END

cas userId 0 0 5 6

33333

EXISTS

注意，我并未使用 gets 最近返回的整型值，而且 cas 命令返回 EXISTS 值以示失败。从本质上说，同时使用 gets 和 cas 命令能够防止您使用自上次读取后通过更新的名称/值对。

3.4.五、缓存管理命令

最后两个 memcached 命令用于监控和清理 memcached 实例。它们是 stats 和 flush_all 命令。

Stats

stats 命令的功能正如其名：转储所链接的 memcached 实例的当前统计数据。在下例中，执行 stats 命令显示了关于当前 memcached 实例的信息：

此处的大多数输出都很是容易理解。稍后在讨论缓存性能时，我还将详细解释这些值的含义。至于目前，咱们先来看看输出，而后再使用新的键来运行一些 set 命令，并再次运行 stats 命令，注意发生了哪些变化。

flush_all

flush_all 是最后一个要介绍的命令。这个最简单的命令仅用于清理缓存中的全部名称/值对。若是您须要将缓存重置到干净的状态，则 flush_all 能提供很大的用处。下面是一个使用 flush_all 的例子：

set userId 0 0 5

55555

STORED

get userId

VALUE userId 0 5

55555

END

flush_all

OK

get userId

END

3.5缓存性能

在本文的最后，我将讨论如何使用高级 memcached 命令来肯定缓存的性能。stats 命令用于调优缓存的使用。须要注意的两个最重要的统计数据是 et_hits 和 get_misses。这两个值分别指示找到名称/值对的次数（get_hits）和未找到名称/值对的次数（get_misses）。

结合这些值，咱们能够肯定缓存的利用率如何。初次启动缓存时，能够看到 get_misses 会天然地增长，但在通过必定的使用量以后，这些 get_misses 值应该会逐渐趋于平稳 — 这表示缓存主要用于常见的读取操做。若是您看到 get_misses 继续快速增长，而 get_hits 逐渐趋于平稳，则须要肯定一下所缓存的内容是什么。您可能缓存了错误的内容。

肯定缓存效率的另外一种方法是查看缓存的命中率（hit ratio）。缓存命中率表示执行 get 的次数与错过 get 的次数的百分比。要肯定这个百分比，须要再次运行 stats 命令

3.5.一、 计算缓存命中率

如今，用 get_hits 的数值除以 cmd_gets。在本例中，您的命中率大约是 71%。在理想状况下，您可能但愿获得更高的百分比 — 比率越高越好。查看统计数据并不时测量它们能够很好地断定缓存策略的效率。

4 C#下可用的客户端

C#可用的客户端一共有四种，每一个客户端API中都有详细的说明和注释

• .NET memcached client library https://sourceforge.net/projects/memcacheddotnet/
• EnyimMemcached http://www.codeplex.com/EnyimMemcached/ - Client developed in .NET 2.0 keeping performance and extensibility inmind. (Supports consistent hashing.)
• beitmemcached h.NET memcached client library http://code.google.com/p/beitmemcached/ - Client developed by BeIT with many new features

博客园使用的组合为： couchbase+EnyimMemcached http://www.couchbase.com/

4.一、 C#下可用的客户端memcached client library 

有一个Cookie+Memcached模拟Session保持登陆状态的例子，运行条件是，电脑要装mysql数据库，和配置添加连接字符串，将用户名，密码换成本身的。

<add

name="MySqlDemo" connectionString="server=127.0.0.1;user id=root;password=123;persist securityinfo=True;database=MySqlDemo;charset=utf8;" providerName="MySql.Data.MySqlClient" />